江西人向無黨援,道、咸之交,陳孚恩、萬青藜、胡家玉同時在高位,皆被人擠陷,一僕不再振。青藜既長六卿,與戶部尚書董恂皆有協揆之望,李鴻藻後起而秉樞政,忌兩人資望在先,嗾清流黨攻之,遂沉滯,累年不遷。家玉奉使按事湖南,過武昌,官文以公款三千金為贐,曾國荃後為巡撫,與官文不協,暴其事,家玉遂出軍機。江西錢糧多浮冒,巡撫劉坤一尤苛,家玉出死力糾彈,坤一與爭不勝,遂摭其請托私函入告。朝廷兩罪之,實陰庇坤一,降坤一三級留任,家玉由左都御史降通政司參議,旋即退休。以家玉之剛直使氣而敗,以青藜之自守而亦不振,孚恩浮沉于兩黨之間,宜其更負時謗矣。自家玉罷後垂三十年,江西無三品京官(詹事朱琛祖籍貴溪,亦休致不用)。