但是剥去表面的光鲜,杨广的内心却擅长心计,他知道母亲独孤皇后反感男人多宠,于是就整天和王妃萧氏待在一起,从来不让母亲知道他和别的女人待在一起。即使他不小心让别的美人怀孕了,杨广也让他们堕胎,甚至还把已经生下来的胎儿给掐死。不过皇后对这些事情都是完全不知道,就单纯认为他只宠爱王妃一人,就对杨广的行为连连称赞,认为他为人专一,以后必成大器。
另外,杨广还迎合父亲杨坚节俭的心理,故意在杨坚的面前打扮得很朴素,杨广喜欢结交各级官员,只要是杨坚和皇后叫来的人,他都热情的招待,临走时还给他们带上礼物,这些人返回时,总要在皇上和皇后面前称颂他的贤德。一次杨坚和独孤皇后亲自到杨广的府上来看望他,事先得知消息的杨广赶快把府中的美人藏起来,剩下的就一律换上粗布衣服。当杨坚和独孤皇后看到杨广如此简朴节约,心里感到十分的欣慰。
后来杨广任命为了扬州的总管,临行前杨广就到后宫向独孤皇后告辞,皇后看着趴在地上痛哭流涕的儿子眼泪也下来了,杨广见时机已到,就对皇后哭诉到“我这一走就不能尽心的照顾父皇和母后了,但我的心会时刻牵挂着你们。只是我天生就愚钝,不知道什么原因得罪了大哥杨勇,以致于有人说他想要加害于我”。独孤皇后听说后,愤怒的说道“这个不孝子越来越过分,我还活着他就这样,那我们走了之后他要怎样对待你”。这时杨广立即变得更加的悲戚,连忙给独孤皇后磕头,告诉他们一定要保重。
见到杨坚之后,独孤皇后说起了这件事情,并且说杨勇只宠爱小妾云氏,我们给他选的太子妃也不明不白的死去了,就连一个嫡孙也没有留下。杨坚听后连连摇头,就把上仪同三司韦鼎叫问到“我这些孩子中谁能够担当大任”,他们就只能回答“皇上和皇后喜爱谁,就应该把皇位传给谁,做大臣的怎么敢妄言”。但是杨坚心中都知道只是明白他们不敢说罢了,他自己的心中也有了数。