桓宣武既廢太宰父子，仍上表曰：“應割近情，以存遠計。若除太宰父子，可無後憂。”簡文手答表曰：“所不忍言，況過於言？”宣武又重表，辭轉苦切。簡文更答曰：“若晉室靈長，明公便宜奉行此詔。如大運去矣，請避賢路！”桓公讀詔，手戰流汗，於此乃止。太宰父子，遠徙新安。

　　謝遏夏月嘗仰臥，謝公清晨卒來，不暇著衣，跣出屋外，方躡履問訊。公曰：“汝可謂前倨而後恭。”

　　謝無奕性粗強。以事不相得，自往數王藍田，肆言極罵。王正色面壁不敢動，半日。謝去良久，轉頭問左右小吏曰：“去未？”答雲：“已去。”然後復坐。時人嘆其性急而能有所容。