维持了两年，有一次他偶然发现他女儿力气很大的事情都是假的，是那个小妾为了争宠使出来的手段，他处理了这个小妾之后才回过神来，想了这整件事。
于是才开始后悔，后来圣女这事成了他的执念，他拼命嗑药纳妾，夫人也被他逼走了，也只再得了小女儿一个，也是普通的没有任何大力。
后来他拼命嗑药磕坏了身子，再也不行了。所以每到他找人拐宝娥那日，他就将自己关起来灌得大醉，想以此来麻痹自己。
这些年他也甚少再去樊城，前几年更是将自己的随身红玉麒麟扳指给了樊辉，让他找到宝娥之后将戒指给她。
对了红玉麒麟扳指，想来是在这事上露了破绽吧，他当时拿钱袋给那个人时好像并没有将扳指摘下来。
樊老夫人见他跪下，默认了此事，再也忍不住，冲上前去，对他一阵拳打脚踢。樊辉也恨不得一起上手，只可惜他娘打得，他打不得。