謝公在東山，朝命屢降而不動。後出為桓宣武司馬，將發新亭，朝士鹹出瞻送。高靈時為中丞，亦往相祖。先時，多少飲酒，因倚如醉，戲曰：“卿屢違朝旨，高臥東山，諸人每相與言：‘安石不肯出，將如蒼生何？’今亦蒼生將如卿何？”謝笑而不答。

　　桓玄素輕桓崖，崖在京下有好桃，玄連就求之，遂不得佳者。玄與殷仲文書，以為嗤笑曰：“德之休明，肅慎貢其楛矢；如其不爾，籬壁閑物，亦不可得也。”

　　王、劉每不重蔡公。二人嘗詣蔡，語良久，乃問蔡曰：“公自言何如夷甫？”答曰：“身不如夷甫。”王、劉相目而笑曰：“公何處不如？”答曰：“夷甫無君輩客！”