伽罗更加喜爱杨广，有意废黜杨勇的太子之位而立杨广为太子。
杨勇为此感到害怕，却又没有办法；隋文帝知道他内心不安，便派杨素去观察他，结果杨素却故意激怒杨勇，使杨勇说出抱怨的话，从此隋文帝更怀疑他了。
独孤伽罗与杨广等人都在观察他的一举一动，向隋文帝进谗言，加上杨勇多有埋怨之言语，隋文帝于是废杨勇为庶人，改立杨广为太子。
直到文帝卧病于仁寿宫时，皇太子与文帝姬妾皆随侍在侧，《资治通鉴》、《隋书》载宣华夫人被太子杨广“无礼”之事。 宣华夫人将此事告诉文帝后，文帝始知冤枉了杨勇，并大骂独孤皇后与杨广，派人召杨勇进宫，准备废杨广而复立杨勇为太子，但是此事被杨广拦截，随即文帝便暴崩，杨广即位，立即假拟文帝诏书，赐死杨勇。
炀帝后来追封杨勇为房陵王，但是子嗣不得继承其位，全部流放济南，后来多数都被杨广杀死。
我好奇地问：“书生，同样都是伽罗的儿子，为啥伽罗这么偏向杨广呢？”
书生说：“只能说杨广会讨母亲欢心吧，这个杨勇也许是个倔脾气。”
我说：“那为啥不去找他外公独孤信告状呢？”
书生呵呵笑着说：“其实这个杨勇也不是个好东西，杨勇也好，杨广也好，没有本质的区别。也许杨勇上台还不如杨广呢，他对正妻的态度足以证明他没有一点敬畏之心。在古代，正妻的地位是不容置疑的，晓得吗？”
“那么这里会是葬的杨勇吗？”
书生点头说：“很有这个可能，而且我隐约觉得，这里安葬的的确是杨大哥的祖先。”
“真的假的？”我大声问。
“难道你不觉得杨大哥和杨勇的脾气很像吗？”书生看着杨大哥呵呵笑了起来。
杨大哥摆着手说：“你就别笑话我了，我可没有那个本事。这一个婆娘我都搞不赢，再给我几个，直接送我去见阎王算了。”
姚敏不屑地说：“你该加强锻炼了，你这身体，以后怎么当爹啊！”
我说：“杨勇的后人到了济南，偷偷有一支逃到了阴山，在这里安葬了杨勇之后，就在这里住了下来，发展成了现在的杨庄。”
杨大哥大