桓宣武既廢太宰父子，仍上表曰：“應割近情，以存遠計。若除太宰父子，可無後憂。”簡文手答表曰：“所不忍言，況過於言？”宣武又重表，辭轉苦切。簡文更答曰：“若晉室靈長，明公便宜奉行此詔。如大運去矣，請避賢路！”桓公讀詔，手戰流汗，於此乃止。太宰父子，遠徙新安。

　　習鑿齒史才不常，宣武甚器之，未三十，便用為荊州治中。鑿齒謝箋亦雲：“不遇明公，荊州老從事耳！”後至都見簡文，返命，宣武問“見相王何如？”答雲：“壹生不曾見此人！”從此忤旨，出為衡陽郡，性理遂錯。於病中猶作漢晉春秋，品評卓逸。

　　夏侯湛作周詩成，示潘安仁。安仁曰：“此非徒溫雅，乃別見孝悌之性。”潘因此遂作家風詩。