桓宣武既廢太宰父子，仍上表曰：“應割近情，以存遠計。若除太宰父子，可無後憂。”簡文手答表曰：“所不忍言，況過於言？”宣武又重表，辭轉苦切。簡文更答曰：“若晉室靈長，明公便宜奉行此詔。如大運去矣，請避賢路！”桓公讀詔，手戰流汗，於此乃止。太宰父子，遠徙新安。

　　子曰：“有国者章义恶，以示民厚，则民情不贰。《诗》云：‘靖共尔位，好是正直。’”子曰：“上人疑则百姓惑，下难知则君长劳。故君民者，章好以示民俗，慎恶以御民之淫，则民不惑矣。臣仪行，不重辞，不援其所不及，不烦其所不知，则君不劳矣。《诗》云：‘上帝板板，下民卒。’小雅曰：‘匪其止共，惟王之邛。’”

　　顧長康畫謝幼輿在巖石妙。人問其所以？顧曰：“謝雲：‘壹丘壹壑，自謂過之。’此子宜置丘壑中。”