孙刘联军战胜曹操一年多后,孙权为了巩固和刘备的盟军关系,把妹妹嫁给了刘备。然而,孙夫人个性强悍,还带着100多个武装齐备的丫鬟,刘备总是提心吊胆,生怕触怒了孙夫人。而且,随夫人一同驻扎在公安县的还有人数众多的男性卫队。这些士兵来自江东,与荆州本地的百姓相处的不太融洽,经常有打骂百姓的琐事发生,烦扰着刘备。
刘备无奈之下,只好在公安县城旁边另建了一座小城,将孙夫人和她的男女侍卫们全都移送到那里。然后,刘备就应刘璋的邀请,带兵到益州去抵御张鲁军了。临走之前,刘备将儿子阿斗留给孙夫人抚养。孙权十分生气,他认为刘备去益州是有图谋的,而且事先也没有跟他商量过。所以孙权立刻派人,准备把孙夫人接回江东。孙夫人在刘备和孙权之间选择了后者,并将阿斗也带上了船。赵云和张飞知道这件事后,立刻沿着小路抢先来到江边,拦下了孙夫人,将阿斗带了回来。而孙夫人这一走,就再也没有回来。