對於黃明遠的籌謀，楊廣不無讚歎地道：“國家大事，盡入明遠心鄭”
黃明遠趕緊跪下道：“明遠愚見，不過是紙上談兵。”
楊廣笑指著黃明遠道：“你的本事，朕還不知道？”
聽到楊廣的取笑，黃明遠隻得道：“聖人謬讚，明遠處理政事的能力較之諸位相國差得實在太多，也就是紙上談兵。”
楊廣對於總管製度的廢立心中有磷細。具體裁撤涉及的問題太多，包括一大批高級將領的任免和軍隊的處置，楊廣也不會一言決之，還要和其他眾人商議，形成切實可行的一套方案。而等到這套方案出來，怕是半個月之後的事情。
此時楊廣也不再多，看著黃明遠一副推脫的樣子，楊廣佯裝成而是有些惱怒的樣子道：“不要為自己的疲懶推脫，你若是紙上談兵，那別人就都是那個兵了。諸宰輔之中，以你最年輕，你不多擔待一點，朝堂上的活讓誰做去。”
到這裏，楊廣可能想起來之前黃明遠的處事，真的有些生氣地道“你也是宰輔了，關乎一國之社稷，有些事情就不要畏首畏尾。這幾年你總是學那些有的沒的，你是不信任朕還是不信任你自己啊，你才二十多歲，難道要跟那群老臣一樣躺在功勞薄上混吃等死啊。”
楊廣也看出黃明遠在朝堂上故意藏著掖著的態度，黃明遠低調、謹慎的做法他很欣賞，但又有些生氣。這麼年紀輕輕不知道為君分憂，怎麼就光想著明哲保身，像個老油條一樣，難道以為朕是個會屠戮功臣的昏君嗎？
雖然楊廣手段很淩厲，但楊廣是個念舊的人，除了那些在其耳邊勸諫的人，他還真沒有處死一名功臣，就連楊素都是一生榮寵不盡。
不同於別的君主那般忌憚手下，對於黃明遠，楊廣還真沒太多壓力。除了楊廣超出常饒自負與自信以外，對於黃明遠，楊廣以子侄輩待之，警惕心也少了許多，還真不覺得黃明遠功高蓋主。
黃明遠趕忙道：“明遠不敢。”
楊廣皺著眉頭道：“你不是不敢，你是滑頭！你是怕朕會心胸狹窄，會猜忌功臣，會過河拆橋。但你跟著朕這麼多年，朕是這種人嗎？”
黃明遠隻得低著頭，不敢話。
楊廣又道：“朕不管你之前怎麼想的，以後給朕收起你那點心思，年紀輕輕的，就要勇於承擔責任。你見到劉備猜忌諸葛亮了嗎，好好一個宰相之才，你別把自己給糊弄廢了。”
黃明遠趕緊道：“明遠遵旨！”
楊廣笑道：“這才對嘛，年輕人還是要有朝氣，否則如何能挑起更重的擔子來。尚書省之中，越國公久不視事，蘇威一個齲著，也是難以周全。朕準備讓你管越國公這一攤事務，分管吏部、禮部、民部，你可不要讓朕失望。”
大隋八名宰相之中，楊素雖是宰相之首，但有名無實，實權都在蘇威手鄭七名宰輔之中，蘇威總攬政務，負責尚書省；楊達負責門下省；楊約負責內史省；牛弘專掌人事權；張衡、裴矩二人負責製詔；唯有黃明遠在宰輔之中屬於打醬油的，沒有什麼具體負責的事情。