正當楊廣極度鬱悶的時候，門外竟然又不合時宜地來了人，還老實不客氣地連敲了五六下門。一個陌生而又似乎有些熟悉的聲音喚道：“殿下！殿下，臣張衡求見！”
楊廣一時也記不起張衡是誰，但人家既然已經找到書房來了，應該也是比較熟的官員，否則總管府的人也不會讓他直接過來。歎了口氣，起來整理了一下衣冠，在椅子上端坐下來，應道：“請進！”
門外進來一人，三十來歲模樣，留著三縷短須，進門便行禮道：“臣張衡，恭喜殿下病愈安康。”隻見此人臉上似乎永遠帶著淡淡的笑意，很是親切，一看就是極好相處的那種人。
楊廣此時突然想起了此人的來曆。張衡，不就是曆史上隋煬帝的最得力助手之一麼？他從楊廣任晉王開始一直跟著楊廣，對楊廣竭慮盡誠，在楊廣奪嫡篡位的過程中起了極大作用，曆史上甚至有傳說是張衡為楊廣殺死了重病的隋文帝，才使楊廣順利登上帝位！而張衡卻因此遭到隋煬帝的猜忌，最後被冠以莫須有的罪名處死！
其實此人極有才能，他是河內（今河南省沁陽縣）人，出身於中級貴族家庭，史書上評價他“幼懷誌尚，有骨鯁之風”，年僅十五歲就受學於國家最高學府——太學，專心研治學問，為同輩學者所推崇讚服。當時北周武帝宇文邕在他母親文宣太後叱奴氏的居喪期間，不遵從儒家的經典喪服製度，經常帶領左右侍從外出圍獵，無所顧忌。張衡還沒有任何官位，竟除帽露發，帶著棺材，攔駕以死勸諫。幸好周武帝是個有雄圖遠略的明君，並未勃然大怒，反而十分欣賞張衡的勇氣和用心，提拔張衡為皇子漢王宇文讚的侍讀官員。隋文帝楊堅奪取北周政權建立隋朝後，張衡又被指派跟隨晉王楊廣，任河北道行台刑部尚書，成為楊廣的一名重要僚屬。
但是知道了此人的來曆，甚至知道此人可能的下場，楊廣卻一下子不知道應該如何對待這個臣子了。心中不禁有些痛恨起自己的這種“特異功能”來，勉強一笑道：“張大人有心了！”
張衡一愣，他曆經多年磨練，少年時的耿直之正氣已逐漸磨平，為人處事日見圓滑，因此到並州之後刻意逢迎，與楊廣已經建立了很好的關係，沒想到這時楊廣見到自己，卻似乎有些不冷不熱的感覺，當即笑道：“殿下何必對臣如此客氣，叫臣的字建平便是。剛才臣見了王韶大人和李徹大人，他們對殿下一氣嗬成的《平戎論》大為讚賞，臣也看了幾遍，殿下之能，實在是令人歎服……”
楊廣正為此事懊悔，聞言更是心煩，而且心中又加深了一個印象，就是張衡見麵就大拍馬屁，果然不像個“忠臣”，搖了搖頭，沒好氣地道：“此事不要再提了。建平你有什麼事情嗎？”他心中不爽，口中自然也就不客氣了。
殊不知這卻有點冤枉了張衡。張衡雖然一見麵就讚歎，有拍馬屁之嫌，但卻也有很大部分是屬於真心話。他自跟隨楊廣到了並州，便隱隱存了要把楊廣推上太子之位的用心，否則他也難有出頭之日。楊廣一向成熟穩重，有大將之風，已經令他這一想法日益強烈。今日聽王韶與李徹一說，知道晉王之才竟然深不可測，心中更是一片熾熱，馬上便趕過來見楊廣。誰想卻連續碰了楊廣的兩個軟釘子。
他雖然不知道楊廣為什麼會這樣，但察言觀色，卻明白了晉王的心情並不好，也不著惱，嗬嗬一笑道：“臣並沒什麼大事，隻是覺得殿下已經幾日未出府門，必然心悶。因此特來邀請殿下，一同出門走走，散散心。不知殿下意下如何？”
不管他心中的感受如何，他臉上始終帶著親切的笑容，語氣始終是那麼真誠，所作的提議又合乎情理，試問心情鬱悶的楊廣怎能拒絕？更何況楊廣對於這個時代的城市人文也極感興趣。
於是，楊廣在張衡的陪同下，帶著四個侍衛，出現在了晉陽城的街道上。
六個人均是便衣打扮，屬於微服出訪，很顯然，張衡這樣帶晉王楊廣出來，已經不是第一次了。
晉陽城位於汾河之西，曆來是是華夏民族在北方的軍事重鎮，始建於春秋中晚期，戰國初期，曾為趙國都城。秦統一後，初置太原郡，治所在晉陽。漢武帝時，又稱“並州”。北魏與北齊時期，分別為霸府和別都。
經過曆代的修築擴建，此時的晉陽城堅固雄壯，最外圍的乃是西晉並州刺史劉琨為禦強敵擴建的城池，高四丈，周回二十七裏，稱為州城。
州城之內的南麵，另有一座小城池，為古晉陽城，又名大明城，城周四裏，高四丈，因北齊後主高緯置大明殿而得名。楊廣所在的晉王府，卻是在城池北麵，由東魏孝靜帝時權臣高歡在此所築的晉陽宮修葺而成。
晉陽本身物產就十分豐饒，北齊統治期間，又對晉陽城的建設十分看重，悉心經營之下，農業與商業均得到了恢複發展，因此此時的晉陽城內商業興盛、市麵繁榮，乃是北方的主要商埠之一。