沃德公司走向衰落的還有一個不可忽視的重要原因，那就是沃德公司的機構留不住人，因此失去了不少重要的管理人員。艾弗裏一直以鐵腕統治著整個沃德公司，容不得別人對他有半點不同的意見。在他3年的總裁任職期間，有24名以上的副總裁以及其他為數不少的管理人員離開了沃德公司，其中有人後來成為洛德和泰勒公司及W·T·格蘭特公司的總裁。艾弗裏的獨裁與專製是十分不宜於吸收有能力的管理人才的，因為一般那些有能力的管理人才總是希望能夠有大膽決策的自由。可是，艾弗裏的獨裁與專製卻無法給他們那樣的自由，因此，導致的結果就是：沃德公司留不住人，也吸引不了人。不過，艾弗裏的固執簡直是讓人難以理喻，他就連這一點都還不肯承認。
艾弗裏缺乏正確的判斷，卻又容不下不同觀點，其行為給沃德公司的前途蒙上了陰影。雖然他大半輩子成績卓著，但是對沃德公司而言，卻使它沿著錯誤的方向，一步步走上了下坡路。