裴矩在隋朝對西突厥的關係上起過很大作用。隋朝大業年間，西突厥的處羅可汗處境很是不利，從前臣服的國家開始反叛，鐵勒部這時力量也逐漸強盛，對處羅可汗發起連續進攻。裴矩得知這一情況，便給隋煬帝出了個主意，利用處羅可汗的母親向氏對西突厥發動外交攻勢。原來處羅可汗的父親泥利可汗娶的是漢人妻子向氏，泥利可汗死後向氏又嫁給了處羅可汗的兄弟婆實特勒。開皇末年向氏和丈夫來內地朝見隋朝天子，不久達頭可汗和隋朝之間發生了戰爭，於是特勒夫婦就留在了隋都，朝廷把他們安置在鴻臚寺，也就是隋朝的國賓館。
大業四年二月，隋煬帝根據裴矩的建議派崔君肅出使西突厥，但處羅可汗並沒有把隋朝人放在眼裏，於是隋使便爲可汗分析:突厥原本是一國，後來一分爲二，互相仇殺兵戎相見已有幾十年，至今也不能消滅對方，就是因爲力量相當。現在啓民可汗率百萬之衆向隋稱臣，目的就是要借隋朝力量來消滅你。合二大國滅西突厥應該沒有什麼困難，隋朝的大臣也普遍贊成，只要大隋天子不表示反對，出兵西征日子也就在眼前。可汗的母親知道要攻打西突厥，擔心可汗你的安全，日夜在宮門外哭訴，天子見她可憐，爲此而放棄了出兵。向夫人請求天子派使臣來勸說可汗向大隋稱臣，要求給兒子與啓民可汗相同的待遇。
可汗如果向大隋天子稱臣，你的國家就能保全，母親向夫人也可享長壽。否則向夫人就是在欺騙隋朝的天子，肯定會被殺頭而隋朝也將會同啓民可汗向你發動進攻，到那時候可汗的死期也就不遠。難道你就因爲不肯下跪，眼看母親喪命;難道你就因爲不願稱臣，寧可葬送自己的國家。處羅可汗被隋使說動，下跪接受隋煬帝的詔書。隋使又進一步遊說:“啓民比可汗稱臣要早，可汗如果要和啓民競爭，就應該有更好的表現。”隋使告訴處羅可汗，吐谷渾是啓民可汗小兒子的外婆家，現在隋朝又將義成公主嫁給了啓民可汗，爲了不引起隋朝的疑心，啓民可汗和吐谷渾斷了交，吐谷渾因此也停止了對隋的朝貢。
如果可汗願意對吐谷渾出兵，隋朝肯定會出兵援助。打敗了吐谷渾你再從容去長安不是更好?處羅可汗接受了隋使建議，使臣回來給隋煬帝帶來了西突厥稱臣的好消息，裴矩開始爲隋煬帝籌備第二年的西巡。大業五年(609年)，隋朝第一位突厥專家長孫晟去世，此後西域和其他邊疆問題隋煬帝更多地依賴於裴矩。裴矩主張重點打擊的對象吐谷渾在隋朝時立國已經有三百多年，它的國名得之於始祖吐谷渾，此人原是西晉鮮卑慕容部首領涉歸的長子，但吐谷渾只是小老婆所生，與嫡子慕容關係很不融洽，一生氣他就從遼西跑到了甘肅，在洮河西面的鬆甘草原放牧。
吐谷渾率領的鮮卑人漸漸征服了土著的羌人，他的子孫勢力一直擴展到青海，建立了吐谷渾汗國。但鮮卑在五胡中文明程度最低，結果這些征服者反被被征服的羌人同化西魏大統六年(540年)吐谷渾人建都於伏俟城，其位置於青海省海南藏族自治州共和縣石乃亥鄉以北、菜濟(切吉)河南距青海湖約十五里，周圍是一片地域開闊、水草豐美的大草原。古城略呈方形，東西長二百二十米，南北寬二百米，牆基寬十七米，高十二米，至今仍然相當完整。在城內的中軸線兩側，有幾組建築遺蹟隱約可見。城內偏西處有一長、寬各約七十米的小方城，城外尚有用礫石築成的外郭。外郭的北牆已被河水沖毀完整的南牆長達一千四百米。
這種城內有城，城外有郭及以中軸線爲基礎的建築佈局，反映了漢式城郭制度的基本特點，又頗具民族風格，體現了吐谷渾文化的多元性。當地藏人稱古城爲“切吉加誇日”，藏語“誇日”爲城，“加”爲漢人，意思就是切吉地方的漢人城。因爲這裏自古以來，一直是兄弟民族遊牧之地，他們沒有築城而居的習慣，加上年代久遠，後人不知其來歷，就誤認爲是漢人所築，其實它就是公元6~7世紀赫赫有名的吐谷渾王城。吐谷渾人也有王公貴族、僕射、尚書和中郎將軍，汗王戴黑色的帽子，王的妻子頭戴金花，他們的衣服和器械與漢人有許多相同之處，貴族外出多戴面罩，婦女上襦下裙(上面短衫下面裙子)，頭上裝飾着珠貝。
吐谷渾人沒有固定的賦稅，在法治方面，殺人或盜馬皆處以死刑，而犯其他罪則可以財物贖免。在隋朝人眼裏吐谷渾人的風俗和突厥人相似，喪禮也穿喪服，下葬就可脫除，物產有麥粟和豆。青海湖的中間有座小山，據說在冬天把牝馬放到山上可以得龍種，吐谷渾人曾經得到波斯人的草馬，把它放到青海山上，結果生下了小馬駒，能夠日行千里，這種馬稱爲青海驄。吐谷渾還出產犛牛，銅鐵和硃砂礦也很豐富，鄯善和且末也是吐谷渾的勢力範圍，在它的西北有數百里方圓的沙漠，夏天沙漠的熱風能夠叫人畜喪命。
老駱駝可以預感沙漠熱風的出現，那時它會伸長脖子發出叫聲將駱駝聚在一起，把口鼻埋在沙中，人看到了也會馬上用氈掩住口鼻避免受傷害。以上就是隋唐人對吐谷渾人的瞭解，裴矩當年給隋煬帝講的大致也就是這些內容，隋煬帝對得到龍種馬很感興趣，大業五年(609年)征服吐谷渾後，煬帝令人放二千匹馬入青海，但卻沒有效果，其實所謂龍種就是波斯馬和當地牧馬的雜交品種，吐谷渾牧民爲了得到優良的馬種，一定經過很長時間的精心培育，簡單地放一批普通的馬種自然不會有結果。
吐谷渾在開皇初多次隨突厥入侵中原，成爲隋朝的第二號的敵人，隋朝在平陳以前對吐谷渾以和爲主，決不輕易挑起戰端，也儘量不捲入吐谷渾內部的矛盾。開皇十六年(596年)，文帝將光化公主嫁給吐谷渾汗，但文帝沒有接受吐谷渾汗要把公主嫁給他的建議。文帝謝絕的理由是，如果接受了吐谷渾的親事就不好回絕他國，如一一答應又和自己清心寡慾的主張有違。隋煬帝繼位前夕突厥分裂，吐谷渾人和西突厥一起與隋爲敵，並且容許隋朝的敵人達頭可汗在自己境內藏身。裴矩爲隋煬帝制定打擊吐谷渾的方針和這種形勢有關。
