小昭佩从小是跟着老太爷长大的，老夫人爱屋及乌也是对这个孙女看重，但毕竟不是孙子。徐昭佩的娘亲张氏娘家没有什么权势，只是一个普通的商户，对这个生了的女儿没有话语权，只有在丈夫徐绲上下功夫，可惜徐绲一介武夫不懂情调，久而久之她也心凉了，只好想办法生儿子，一天就是各种汤药。徐绲看着女儿被老爹教养也很放心，一心只扑在军队上，偶尔喝喝花酒。
徐昭佩五岁的时候，家里乱成一锅粥，老太爷病重，张氏一直生不出儿子被老夫人嫌弃，连带着也有点不喜徐昭佩。张氏一天以泪洗面，就算化好妆也是一副愁容。徐绲由于性格太过耿直在官场上受到排挤，皇帝登基后也有意冷一冷这些旧臣，徐绲整日郁闷，回家后看见张氏的愁容更加的心烦，便不愿回去了，总是去花楼住，后来直接带姨娘回家，让张氏心是彻底的凉了，老夫人更是对她不喜起来。
又过了两年徐昭佩七岁了，她的性子倒是十分让人喜爱，七岁的小姑娘已经是张玲珑小嘴，哄的大家都很高兴，老是让老太爷高兴得大加赞赏道“佩儿深的我真传，真是我徐家的大幸”
新来的姨娘木槿是朵解语花，服侍得老夫人很满意，更满意的是肚子十分的争气，才进门不到三个月就有了，医生说看胎像个男孩，可把老夫人高兴得，又让木槿当个平妻的意思。
这让王氏心中不快，不久木槿动了胎气早产，母子双亡，王氏被关了佛堂，天天叫着冤枉，不久悬梁自尽，然后查出是老夫人的旁系外甥女沈姨娘干的，闹得老夫人颜面尽失，被老太爷一气之下收了权关进佛堂。
徐绲在一场战役中受伤不能再有孩子，人有时绝望时更容易忆旧，他时常想起王氏来，便遣散了后院，只是拜托管家照看。
又过了一年老太爷病更重了，完全是病入膏肓了，老夫人也从佛堂中出来照看他，他只是交待老夫人和徐绲一定要厚待徐昭佩，迷离之际一直握住徐昭佩的手喊着“小佩，小佩，遗奴哥哥来了，来陪你了”
老夫人听到后脸都绿了，一下分开他们的手。等老太爷去世后，老夫人一个人坐在房中想了很久很久，脸上泪水不禁的流下来，她喃喃的说“孝嗣啊，你是不是从来没有爱过我，你的心从来都在她那，为什么我这么蠢，以为逼死了她，作为公主你会娶我会爱我，但是你的心从来都在她那里。”
第二天便发现老夫人安详地躺在床上去世了。这个人丁本来不兴旺的家更为凋零了。徐绲虽然怜惜徐昭佩，但是他毕竟没有带过孩子，他呆在军队便忽视了徐昭佩的成长需要人指导。
等他发现徐昭佩这副样子的时候，他也无能为力了，只好为她谋取一份好亲事。