謝公在東山，朝命屢降而不動。後出為桓宣武司馬，將發新亭，朝士鹹出瞻送。高靈時為中丞，亦往相祖。先時，多少飲酒，因倚如醉，戲曰：“卿屢違朝旨，高臥東山，諸人每相與言：‘安石不肯出，將如蒼生何？’今亦蒼生將如卿何？”謝笑而不答。

　　昔者周公朝诸侯于明堂之位：天子负斧依南乡而立；三公，中阶之前，北面东上。诸侯之位，阼阶之东，西面北上。诸伯之国，西阶之西，东面北上。诸子之国，门东，北面东上。诸男之国，门西，北面东上。九夷之国，东门之外，西面北上。八蛮之国，南门之外，北面东上。六戎之国，西门之外，东面南上。五狄之国，北门之外，南面东上。九采之国，应门之外，北面东上。四塞，世告至。此周公明堂之位也。明堂也者，明诸侯之尊卑也。

　　顧長康畫謝幼輿在巖石妙。人問其所以？顧曰：“謝雲：‘壹丘壹壑，自謂過之。’此子宜置丘壑中。”