隋场帝曾回忆自己:“昔从先朝周旋于此(博陵),年甫八岁。”博陵即定州(治今河北定县),这应指其父杨坚作为右三军总管,在建德五年(576)周武帝宇文琶平齐之后,又于翌年与齐王宇文宪破北齐任城王高偕于冀州(治今河北冀县),任定州总管一事。但此时杨坚已被齐王宪和内史王轨等盯上,疑心他“貌有反相”,周宣帝(559-580)也向他发出“必族灭尔家”的替告,杨坚迫不得已,“深自晦匿”,极力掩饰。小小年纪的杨广,已惯见战场厮杀的酷烈和政治旋涡的险恶。他是一个在非常的环境里成长起来的非常人才。