自带领两三万多人马迎出数里，阻击突厥追兵，接到了隋炀帝和文武官员后，立即向后撤退，而后方的突厥队伍越来越多了，滚滚而来，如山洪爆发，声威强大。
杨广等人进入了雁门关后，发现不少守军还在城关下面，没有来记得全部撤回，后面的突厥骑兵就已经杀至，慌乱之下，人喊马嘶，自相践踏，一片混乱不堪。
裴矩大吃一惊道：“不好，这里的兵马一共也就五万，丢在外面就一半数了，剩余的人，面对数十万突厥军马，也坚守不了多久就会破了雄关，应该立即退往雁门郡城，那里城高墙厚，能够阻挡一段期间，同时发动周围的府兵前来勤王，剿灭入关的突厥。”