杨昭死时，他虽留下几个孩子，可都太年幼，所以本来这太子之位自然应当是传给嫡次子杨暕的，奈何这个齐王太过没出息了。

大业二年太子病逝后，杨广便封齐王豫州刺史，大业三年，又转任雍州刺史、河南尹、开府仪同三司。

还把太子的部属都转交给他，可他却十分骄纵，亲近小人，经常派属下寻求声色犬马。乐平公主曾经欲献给皇帝一名美人柳氏，结果杨暕却抢入府中。

杨暕的妃子早亡，结果杨暕却与亡妃寡居的姐姐私通，还生下一子。最让杨广恼怒的还是杨暕居然还把相士请到府中，为她和孩子看相，而相士说她将为皇后，还说那孩子将来会成为太子。

杨暕于是越发认为自己天命所归，于是越发胡做非为。

元德太子杨昭留下三子，他视之为阻碍，暗中行使厌胜之术，想要除掉。

事情败露之后，杨广大怒，赐死了元氏妇，从此对杨暕的恩宠也是日益减少，绝口不再提说让杨暕为太子之事。

这些年，他一直把杨暕带在身边，走到哪带到哪。

可这并不是恩宠，而是监视不放心。

杨昭所出的三个孙子，长孙杨倓，被杨广封为燕王，这些年一直也带在身边，却是悉心教导，十分宠爱。

而另两个孙子则分封为越王和代王，越王杨侗留守东都洛阳，代王杨侑则留守西京大兴。

其实皇帝一直就有了立燕王为皇太孙的意思，可又还有些犹豫不定。可毕竟燕王才十二岁，另一方面，燕王虽为杨昭长子，但却不是嫡出。

杨昭为河南王时，王妃是崔弘度弟崔弘升之女，后来因崔氏谋反案，而被废。再娶名帅韦孝宽之子滑国公韦寿之女为妃，生代王侑。

而燕王是杨昭的妾侍大刘良娣所生，另一个妾侍小刘良娣则生越王侗。

如果杨倓是韦妃所生的嫡子，杨广也没有这种犹豫了。

杨倓三个孙子中最贤最聪明，偏偏却是庶长，嫡孙代王侑则没那么聪明。