薛道衡遭贬的消息传出，在扬州做总管的杨广立即托人捎信给他，要他离京后取道扬州。杨广想等薛道衡到扬州后将他留住，再奏请文帝恩准薛道衡在扬州总管府为官。
不知为什么，薛道衡却不领受扬广的美意，没有从扬州路过，而是直接由江陵南下去了播州，让杨广好一阵不痛快，这些做学问的人总免不掉那种穷酸清高，把面子看得太重要，往往因面子而丢了性命。
杨广即位后，薛道衡上表请求告老。杨广借此机会下诏让他进京见驾，心想，他来京之后便将他留在朝中，这回，薛老头儿还有什么推托之词？并打算让薛道衡做秘书监之职。
杨广看重薛道衡的文才，他常读薛道衡的诗文，有些佳作他已烂熟于心，像那首《人日思归》，更让杨广一咏三叹：入春才七日，离家已二年。人归落雁后，思发在花前。按节历，正月的初一为鸡日，初二为狗日，初三为猪日，初四为羊日，初五为牛日，初六为马日，初七为人日。《人日思归》，抒发了初春时的思念。
薛道衡是北方人，曾受聘于南朝陈国，初春时看雁阵北归，自己却不能回河东汾阴家乡，故日：“落雁后”。人日时节春花未发，而人的归思已动，故云“在花前”。
杨广从御花园来到前殿坐稳，即传旨召薛道衡进殿。
薛道衡来到殿下，杨广看见他长髯垂胸，却是鹤发童颜，精神矍铄，大为惊异，高兴地说：“朕以为老先生年近古稀，已渐衰退，想不到依旧这样健壮，无异于从前。想必老先生有什么养生健身的秘诀，能不能说给朕听听？”
薛道衡哈哈大笑，声如宏钟，说：“陛下，老臣这么多年身居偏远之地，不受喧嚣烦扰，淡泊功名利禄，整天就是读读书，写写文章，心境平和，无焦躁之气。要说养生健身还有秘诀，老臣以为这就是。”
刚一见面，薛道衡就让大业皇帝笑不出来了。向他讨教养生秘诀，不过是杨广恭维他的话，他却当了真，把自己的秘诀说了出来。什么淡泊功名，什么心境平和，都是杨广不愿意听的。你淡泊名利，那别人就是追名逐利之徒？你心境平和，别人都浮躁不稳？大殿里只有你我君臣二人，你这是说给谁听，所指为谁？或许说者无意，可是既然说出来了，就由不得你不让别人往那些方面去想。
杨广干笑了几声，说：“是啊，心境平和确是养生良方。老先生从岭南来京，一路上定有不少见闻，能否讲给朕听听？”
薛道衡捋着长须，点点头，说：“老臣从播州北上，一路上只有一条见闻：官道小路上拥塞了不计其数的车辆民佚，都是赶去挖河开渠的。听地方上的官员讲，全国征调的民伏劳役有三四百万了！”杨广点头：“昨天奏报来的数字，是三百五十几万。”
“陛下，听说正在修一条南北大河，连通黄河、淮河、长江。陛下要乘龙舟沿河而下，游幸江南？”
杨广未置可否，只微笑着说：“江南可是个好地方啊！老先生一定熟知丘迟的那篇（《与陈伯之书》吧？”说到这里，杨广从御座上站起，忘情地背诵起来……一暮春三月，江南草长，杂花生树，群莺乱飞。见故国之旗鼓，感平生于畴日，抚弦登陴，岂不怆恨……
诵毕，杨广又啧啧称赞说：“丘迟把江南景色写得多美啊！陈伯之原在梁朝做江州刺史，梁武帝天监元年叛降北魏，当了个淮南都督。天监四年，武帝命临川王萧宏率军北伐，陈伯之领魏兵抵抗。当时，丘迟是萧宏记室，萧宏就命丘迟给陈伯之写信劝降。丘迟在信中以陈伯之的前途命运和江南故国之情打动了他。陈伯之读了书信之后，即从寿阳率兵归梁。老先生，江南景物竟有如此魅力，难道不值得专程重游吗？”
“陛下也是为了抚慰宣华夫人的思乡之情吧？”
薛道衡才华盖世，且为官多年，竟迂腐地将不该点破的事一语击中。