桓宣武作徐州，時謝奕為陵。先粗經虛懷，而乃無異常及桓還荊州，將西之間，意氣篤，奕弗之疑。唯謝虎子婦王其旨。每曰：“桓荊州用意殊，必與晉陵俱西矣！”俄而引為司馬。奕既上，猶推布衣交在溫坐，岸幘嘯詠，無異常日宣武每曰：“我方外司馬。”因酒，轉無朝夕禮。桓舍入內奕輒復隨去。後至奕醉，溫往許避之。主曰：“君無狂司馬我何由得相見？

　　桓宣武既廢太宰子，仍上表曰：“應近情，以存遠計。若太宰父子，可無後憂”簡文手答表曰：“不忍言，況過於言？宣武又重表，辭轉苦。簡文更答曰：“若室靈長，明公便宜奉此詔。如大運去矣，避賢路！”桓公讀詔手戰流汗，於此乃止太宰父子，遠徙新安