谢安虽然出山了，但是也是心事重重，这心事不是公务而是私事。其实，谢安有个隐秘的相好，名叫小洁，是个歌姬，所谓歌姬就是卖唱不卖身的女子，这女子弹得一手好琵琶，那唱声也能让男人们陶醉，再加上柳条腰，公子哥们争相追求，但她和谢安挺投缘。因为她也能填词作赋，所以谢安也对她格外地喜欢，好几次都想把她娶回家。但是谢安的老婆刘氏不同意谢安取妾，理由是她觉得谢安是晋朝的栋梁，如果遇到哪个狐狸精被丢了魂，这不光是谢家的事，而且还是国家的事，所以刘氏一直恶人做到底，一直不同意谢安纳妾，既然大老婆不同意他纳妾，谢安也没有其他办法可施展，所以就憋着，等待合适的机会。
有的时候，谢安也通过自己独特的方式来表达自己的不满。有一次，谢安给他的学生和侄子讲课的时候，故意选择《关睢》、《螽斯》这两首诗来解释，而且他还故意把声调调得很高，有意想让在里屋的刘氏听到。这《关睢》、《螽斯》两首诗讲的是关于妇女以不妒忌为美德，当然这个妒忌也自然包括了女人之间的容貌的妒忌。谢安特地选这两首诗高声朗读也是指桑骂槐，其用意也显而易见。刘氏也是大家闺秀也读了好几年私塾，对于谢安这套把戏也自然明白，只是装糊涂不点穿而已。刘氏在内屋里面有条不紊地织着布，这织机的节奏声也慢慢传入了谢安的耳朵，谢安明白夫人这也是向自己传递着讯息，可能在说：“不管你谢安怎么抱怨，夫人我就是不答应。”这谢安也不笨呀，自己有招，就趁着课间休息喝茶的工夫，让刘氏最喜欢的小外甥到刘氏那里去唠唠嗑。刘氏自然会提起他们刚才朗读的那两首诗，假装装糊涂问小外甥这是谁写的。小外甥向刘氏解释说这是周公写的。刘氏故意提高声调说：“这周公是男的，自然向着男人为男人写这诗，如果换做周公的老婆来写这两首诗，自然会向这女人写诗。”隔壁的谢安喝着茶听了这个话，差点没把茶水给喷出来，连连咳嗽着想把呛着的水给咳出来。内屋的刘氏听见这咳水的声音自然手挡住小嘴，呵呵一笑。
不知怎么的，谢安想纳妾但刘氏阻碍纳妾这事被传到了司马绍的耳朵里。司马绍心想，这谢安给足自己面子了，大老远地跑到建康做自己的大臣，我也应该为他做点啥呀。于是，司马绍和自己的心腹太监商量了此事，太监徐萧桦知道要办成这事必须谢安的老朋友王右军王羲之来办。于是乎，太监徐萧桦差人给绍兴的王右军送了点京城有名点心，并把这层意思转达给了王右军。王右军自然欣然接下这个任务。他也没有直接去谢安家，而是骑马去了刘氏的老家。这刘氏的老家离开王右军家不远，地处诸暨地区。在中国有两个地方产美女多，一个是诸暨，传说西施就是诸暨人，还有一个地方就是扬州。王右军用自己的书法作品摆平了刘氏父亲，并取得了刘氏父亲的一封亲笔信，得意洋洋地骑马直奔谢安家。
此时的谢安正躺在床榻上歇着，一看王右军来访，立马起身相迎。谢安纳闷，这王右军没事突然来串门干啥，但是虽然是满腹疑虑也装作淡定，泡好茶端给王右军享用。王右军点头看着这杯上的图案说：“茶虽甜，人心缺急。”谢安听了后，有点猜到王右军的意思了，心想：“这王右军鬼啊，他怎么有点猜到我现在的心思了？莫非有人告诉他了不成？”不过这谢安也不确定，就顺口说道：“何人心急？”王右军说道：“自然是杯中人。你看啊，这杯子上画了两个人，一个男人，一个女人，男人想邀请女人去赏花，但是女人却要去那桥上离开，你说那男的现在心急不急？”谢安拿起茶杯，自己端详，确实画了两个人，一个男人，一个女人，于是问道：“有何办法让这男人心安呢？”王右军说道：“自然是书信。”他说着话，从怀中掏出刘氏父亲写给刘氏的书信，并对谢安说：“你让仆人给夫人送去吧。”刘氏的贴身丫鬟把书信传递给了刘氏，刘氏阅读了一番，随即把自己手中绣好的上面绣有一对鸳鸯的手帕让丫鬟给谢安捎去。丫鬟把手绢给谢安，并传话说：“夫人问你这绣得如何？”谢安一看自然明白，这是夫人传话说是同意了，便说道：“极好，极好。谢夫人。”谢安转身对王右军作揖说道：“多谢兄台帮忙。”王右军说道：“谢兄不必客气，这也是皇上的美意，要谢就谢皇上吧。那你以后要多为朝廷出力哟。在此祝贺谢兄了。”谢安答道：“一定一定，我一定做好自己的本职工作，多为国出力。还请右军兄不日来府上赴宴。”
两人说罢，谢安目送王右军和坐骑远离后返回入了自己的府邸。