桓宣武既廢太宰父子，仍上表曰：“應割近情，以存遠計。若除太宰父子，可無後憂。”簡文手答表曰：“所不忍言，況過於言？”宣武又重表，辭轉苦切。簡文更答曰：“若晉室靈長，明公便宜奉行此詔。如大運去矣，請避賢路！”桓公讀詔，手戰流汗，於此乃止。太宰父子，遠徙新安。

　　謝公在東山畜妓，簡文曰：“安石必出。既與人同樂，亦不得不與人同憂。”

　　王脩齡嘗在東山甚貧乏。陶胡奴為烏程令，送壹船米遺之，卻不肯取。直答語“王脩齡若饑，自當就謝仁祖索食，不須陶胡奴米。”