楊堅總共有五子，長子廢太子楊勇，次子太子楊廣，三子秦王楊俊，四子蜀王楊秀，五子漢王楊涼。
三字秦王楊俊已經過世，自然就可以放過一邊，不必再理會。
可是蜀王楊秀與漢王楊涼都是在自己的屬地有著極大的權力，手中計程車卒也是相當的多，楊廣現在雖然已經是太子，但是心中還是不太安穩。
楊廣很清楚，既然自己能夠搞掉楊勇成為太子，那麼楊秀與楊涼也就有可能搞掉自己，所以心中一直在隱隱警惕著。
楊廣一方面儘量做好自己的事，不要讓人挑出毛病來。另外一方面也在想辦法怎麼搞掉楊秀與楊涼這兩個兄弟。
蜀王楊秀有膽氣，容貌瑰偉，美鬚髯，多武藝。論本事並不在楊廣之下，讓楊廣心中極為的擔心，而且蜀地多俊傑，對楊廣的威脅也是最大的。
可是無意間得知一件事之後，楊廣心中對於楊秀的忌憚頓時小了很多。原來蜀王楊秀雖然極為的出色，但是不知道怎麼的，楊堅對這個兒子向來是極為的不滿意，甚至曾經對獨孤皇后說過：「楊秀必不得好死。朕活著的時候他不敢鬧事，等他哥哥當皇帝后這小子肯定要造反。」
漢王楊涼雖然是幷州總管，自山以東，至於滄海，南拒黃河，五十二州全部都歸楊涼管轄。但是對於這個弟弟，楊廣還是很清楚的，既無遠謀，又無膽識，雖然大隋出精兵的地方全部都在楊涼的管轄之下，但是楊廣卻是絲毫不擔心。
作為一個出色的人才，蜀王楊秀自然是極為的自傲的。可是在得知楊勇被廢，楊廣成為了太子之後，心中也是一陣地不平衡。
在楊秀看來自己比楊廣要優秀許多。如果不是自己出生的太遲，楊廣所立下的那些功勞就應該是自己地了。
前面楊勇成為太子，那是因為人家是嫡長子，自己沒有什麼話可說。現在嫡長子被廢，自己竟然還是沒有成為太子，讓楊秀的心中覺得極為的不爽快。
就算是這樣。楊秀在心中還是覺得自己比楊廣優秀。
前面楊勇成為太子，那是因為人家是嫡長子，自己沒有什麼話可說。現在嫡長子被廢，自己竟然還是沒有成為太子，讓楊秀的心中覺得極為的不爽快。
眼見自己無法成為天子了，楊秀也就變的極為地不撿點，在蜀地「違犯制度，車馬被服，一擬天子」，自己關起門來做皇帝。
楊廣知道這件事之後心中極為的高興。雖然眼見對這位四弟不是很喜歡，但是一直放在那裡，楊廣的心中還是有些不舒服。因為遲早會威脅到自己，現在楊秀違犯制度，車馬被服，一擬天子。給了楊廣攻擊的藉口。可以讓楊秀永遠無法威脅到自己。
在和楊素、秦瓊等人商議之後，楊素上表彈劾楊秀。
對於任何一個帝王來說，都不能容忍自己的權威受到威脅，就算是自己的兄、弟、妻、子也不行，楊秀的所作所為讓楊堅對自己這個本來就不是很喜歡的兒子極為的討厭，在朝堂上大發雷霆，說道：「當斬楊秀於市。以謝百姓！」
就算是這樣，楊廣還是有些不放心。派人做兩個小木人，分別寫上楊堅和漢王楊諒的名字，「縛手釘心，令人埋之於華山下」。然後，楊廣又指派楊素等人把偶人挖出，誣稱楊秀所為。楊堅暴怒如狂。馬上廢楊秀為庶人。禁錮終身，誅殺他手下數百僚屬。
楊涼在知道楊秀之事之後。本來就對楊廣不滿地楊秀心中更加的緊張，以防突厥的名義，繕治甲兵，大發器具，訓練士卒以備不時之需。
楊廣做這一切的時候，並沒有隱瞞秦瓊。秦瓊也是一句話都不說，默默地看著。
而這時候獨孤皇后也已經過世了，沒有人給楊秀說話，雖然最後楊堅也並沒有將楊秀殺死，但是楊秀卻也是形同廢人。
這期間大隋和突厥還是時不時的有戰事發生，秦瓊的官職也繼續往上升，成為了大隋最年輕地柱國，雖然以秦瓊的功績就算是成為上柱國也不是什麼難事，但是楊堅並不想讓秦瓊在自己手中就成為上柱國。
楊堅想要給後繼者一個能夠施恩給秦瓊的機會。
房玄齡與杜如晦也還是秦瓊的長史、司馬，但是官階已經是從六品下，也算是升了一階。這幾年來，秦瓊府中的掾屬、諸曹參軍事、諸曹行參軍、也慢慢的充實起來了，但是像房玄齡與杜如晦這樣的宰相之才，也是再沒有見過。
雖然再沒有遇上這樣地人才，但是秦瓊心中並不遺憾。秦瓊很清楚這樣的人才本來就不多，自己一下能遇上兩個就已經是很幸運了。
而這數年來，楊素的權勢也越來越大。楊素的弟弟楊約及從父文思、文紀、族父忌併為尚書、列卿，諸子無汗馬之勞，位至柱國、刺史；廣營資產，自京師及諸方都會處，邸店、碾、便利田宅，不可勝數。
家僮數千，後庭妓妾曳綺羅者以千數；第宅華侈，制擬宮禁；親故吏佈列清顯。朝臣有違忤者，或至誅夷；有附會及親戚，雖無才用，必加進擢，朝廷靡然，莫不畏附。敢與素抗而不橈者，獨柳及尚書右丞李綱、大理卿梁而已。
時間很快就走到了仁壽四年，秦瓊知道這一年就是楊堅歸天的時間，雖然自己忘記了楊堅是那一天歸天的，但是是在這個時侯歸天，那是沒有問題的。
秦瓊打起精神來，等著最後時刻地到來。
正月，楊堅帶著宣華夫人、容華夫人前往岐州仁壽宮享樂，將朝政交給了越來越成熟地楊廣。
秦瓊這幾年來也由於從來不插手朝政的原因，楊堅對秦瓊是越來越滿意了。而且秦瓊和朝廷眾臣基本上沒有什麼交往。唯一地一個兒女親家還過世了。在楊堅看來，秦瓊這是對自己極為地忠心。
秦瓊這些年來的謹慎小心，也算是有了回報。
四月份。楊堅突然患病，而且還是一病不起，直接起不來了。
楊廣覺得自己登基的時候到了，以前極力掩飾地一些本性都出來了。可是此時的朝廷眾臣都已經是楊廣的人了，就算不是楊廣的人，對楊廣的這些事也是敢怒不敢言。
雖然楊堅已經到了彌留之際。但是楊廣還是不放心，擔心會發生什麼變化，也不知新登寶座後該做什麼，於是便寫一封信，讓宮女拿到前廷去問楊素。
楊素見信後又寫一封回信，對楊廣提出的問題一一作答。封上信口回送楊廣。送信地宮人轉了幾道手，誤以為是送給皇帝的上奏，呈給楊堅。
楊堅突然看到楊素的奏章很是奇怪，因為自己早就已經將朝廷所有的政務都交給了楊廣，而且自己現在還是身患重病。楊素怎麼還會給自己的上奏章呢？而且這奏章還是密封起來的。當楊堅開啟密封的書信看完之後，氣的滿面通紅。
恰恰就在這個時候宣華夫人陳氏突然慌慌張張的跑了進來，楊堅見狀詢問發生了什麼事。可是陳氏支支吾吾的不敢說。
楊堅在獨孤皇后過世之後，對宣華夫人與榮華夫人極為地寵愛，看到宣華夫人的樣子，知道一定是發生了什麼大事。遂大聲喝問。
宣華夫人見楊堅已經有些生氣，也不敢隱瞞，只低聲說道：「太子無禮。」
原來楊廣對宣華夫人這位後母的容貌喜歡之極，可是宣華夫人已經成為了楊堅的妃子。楊廣便把這樣的心思壓在了心底。
這天楊廣前來大寶殿，準備向楊堅請安。突然看到了從遠處走來的宣華夫人，長久以來壓制在心底地欲往突然冒了出來。