他剛參加工作的時候單位是司徒府,擔任著作郎的職務.但是他以身體原因為由辭去了工作.他搬到會稽居住,與王羲之以及高陽的許詢、和尚支遁壹起遊玩.他們如果是外出就是釣魚或是遊山玩水,如果在家就做詩寫文章,完全沒有理會世事的意思。