韓壽美姿容，賈充辟以為掾。充每聚會，賈女於青璅中看，見壽，說之。恒懷存想，發於吟詠。後婢往壽家，具述如此，並言女光麗。壽聞之心動，遂請婢潛修音問。及期往宿。壽蹻捷絕人，踰墻而入，家中莫知。自是充覺女盛自拂拭，說暢有異於常。後會諸吏，聞壽有奇香之氣，是外國所貢，壹箸人，則歷月不歇。充計武帝唯賜己及陳騫，余家無此香，疑壽與女通，而垣墻重密，門合急峻，何由得爾？乃托言有盜，令人修墻。使反曰：“其余無異，唯東北角如有人跡。而墻高，非人所踰。”充乃取女左右婢考問，即以狀對。充秘之，以女妻壽。

　　王江州夫人語謝遏曰：“汝何以都不復進，為是塵務經心，天分有限。”

　　顧長康畫謝幼輿在巖石妙。人問其所以？顧曰：“謝雲：‘壹丘壹壑，自謂過之。’此子宜置丘壑中。”