謝奕作剡令，有壹老翁犯法，謝以醇酒罰之，乃至過醉，而猶未已。太傅時年七、八歲，箸青布褲，在兄膝邊坐，諫曰：“阿兄！老翁可念，何可作此。”奕於是改容曰：“阿奴欲放去邪？”遂遣之。

　　桓宣武作徐州，時謝奕為晉陵。先粗經虛懷，而乃無異常。及桓還荊州，將西之間，意氣甚篤，奕弗之疑。唯謝虎子婦王悟其旨。每曰：“桓荊州用意殊異，必與晉陵俱西矣！”俄而引奕為司馬。奕既上，猶推布衣交。在溫坐，岸幘嘯詠，無異常日。宣武每曰：“我方外司馬。”遂因酒，轉無朝夕禮。桓舍入內，奕輒復隨去。後至奕醉，溫往主許避之。主曰：“君無狂司馬，我何由得相見？”

　　謝公聞羊綏佳，致意令來，終不肯詣。後綏為太學博士，因事見謝公，公即取以為主簿。