同时，杨广总结塞外之行所见所闻，认为对于边塞民族，应以安抚招降为上策。既然，他已知有很多胡人从西域到张掖做买卖，就派遣吏部侍郎裴矩去掌管张掖的贸易。裴矩晓得皇帝对远方事物极有兴趣，特地向胡商探询各国的山川地理、风俗习惯、服饰仪表等等，据此撰写了《西域图记》，三卷内容总共包含四十四国。

此外，裴矩又制作了西域地图，上面包括了西域所有重要的地点。这张地图显示，从敦煌出发，到达西海，共分为三条路：北路从伊吾起，中路从高昌起，南路从鄯善起，总汇到敦煌。

裴矩进宫面圣时，一边献上西域地图与《西域图记》，一边禀报道：“凭借着国家的威德、将士的骁勇，渡过汜水，翻越昆仑山，易如反掌，但是突厥、吐谷浑分别统辖着羌人、胡人的国家，只因为他们中途阻挡，所以西域各国不能来朝贡。如今，有商人秘密送来很多言辞诚恳的书信，表示他们都愿意成为大隋的臣属。倘若要降服他们，只须由朝廷派出使者，不必动用干戈。只要这些蕃国从属于大隋，吐谷浑、突厥就很容易消灭了。想要使得戎狄、华夏融合为一体，就在此一举了！”

杨广听了，深以为然。此后，他每天宣召裴矩，垂询西域的情况。

裴矩时常形容西域的各种珍宝，并强调大隋很轻易就能并吞吐谷浑。

杨广向来仰慕秦始皇、汉武帝的功绩，诚心要开通西域，就为此任命裴矩为黄门侍郎，负责全权处理西域四夷的事务。于是，裴矩奉旨前去张掖，招揽西域各国的胡人，以利诱的方式劝导他们入朝。从此，西域的胡人源源不绝而来。他们所经过的郡县，地方政府都要提供免费食宿，使得地方官员疲于招待迎送，耗费的银钱更是上亿！

萧珻风闻此事，特地劝谏杨广不要花这么多钱在招抚胡人之上。她委婉解析道：“很多胡人尚未开化，请他们来白吃白喝，未必就能赢得他们的忠诚，不如节省一些。”

然而，杨广听不进去。他随口搪塞道：“朝廷大事，皇后还是别操心吧！朕自有主张。”

萧珻无奈，只好不再多言。

杨广一心要拓展比汉武帝时代更广阔的领土，开创比汉武帝时代更辉煌的功业。他眼中只有他自己设定的伟大目标，看不见已付出与将付出的代价有多么巨大。他回顾自己即位以来的三年，自认三年有成，但仍有更多大事要做！

大业三年匆匆过完了。到了大业四年阴历元旦（西元608年一月二十三日），官员们都在放年假，杨广却迫不及待下诏，宣布将征召黄河以北一百多万人开凿永济渠，引沁水向南入黄河，向北通涿郡。