开始的时候，因为有愧疚心在，女佣还会对祁屿很好，但是时间长了，看着祁家人一直都没有找过来之后，女佣心里原本对祁屿的愧疚渐渐消散，并且十分的想念自己的小孩儿。
女佣心里对祁屿的愧疚，渐渐的就变成了厌恶和仇视。
她觉得，要不是因为祁屿，她才不会做出这种事情出来。
女佣开始虐待祁屿，女佣的丈夫回到村子里之后，就开始游手好闲，他不知道祁屿不是自己的小孩儿，有的时候看着女佣偷偷的欺负祁屿的时候，丈夫还会护着祁屿一下。
但是，等祁屿越来越大，身体体弱多病，丈夫从某次祁屿的体检中发现祁屿的血液，居然跟他和女佣的血液都不一样。
丈夫气急了，怒气冲冲的回去找女佣对质，女佣看着瞒不下去了，最后才迫不得己将自己当年做的事情说了出来。
想到自己养了这么多年的儿子居然不是自己的亲儿子，丈夫对祁屿的态度自然是不喜了起来。
而且，因为祁屿体弱多病的缘故，每个月给祁屿治病，都需要花费一起很大的开销。原本就节俭的家庭变得更加的贫穷。
女佣和她的丈夫两人对祁屿都十分的不好，关在家里又打又骂，可是碍于不敢出人命的想法，两人虽然虐待祁屿，可是又不敢对祁屿弃之不顾。
祁屿在两人的虐待之下活到十二岁。
但是，就在这个时候，京城的祁家发现了祁屿被掉包的事情，并且找上门来了。
自己的孩子被掉包，养育了多年的孩子居然不是自己亲生的。
这件事情，其实说起来也是很丢脸的一件事儿，所以祁父祁母压根就没有将这件事情给曝光出来。
祁家的人找到了祁屿之后，给了那女佣夫妻一笔不小的钱财，将祁屿带回了家。
不过，那个女佣的亲儿子假大少也继续待在祁家，就外对说两人是孪生双胞胎，只不过，因为祁屿的身体不好，所以才没有接回来一起住。