五郎延德见呼延赞退走，只是勒马叫道：“乘人之危，胜之不武，呼
延将军！今日五爷权让你，明日再与你大战八百回合！”
身受箭伤的潘仁美此时心中倍感窝火：自己偷袭未成，反被人家偷袭，腿伤了，阵乱了，这一仗胜负分了，杨家的威风更抖起来了。真是应了那句话——偷鸡不成反蚀把米！怪谁呢？恐怕只能怪自己的命！
太宗、八王、高怀德、呼延赞一起过来与他商议怎么办？太宗、八王坚持再战下去对招降杨家不利；高怀德、呼延赞也认为今日一战未占半点上风，还是收兵为好。潘仁美权衡半天无法可想，只好同意全军撤退。
宋军护送受伤的潘仁美徐徐撤退，杨家人并不追赶。
忽听喊声大作，耶律沙带领着三万辽军乘势杀了过来。他看到杨继业按兵不动，惊奇道：“杨老将军！宋军溃退，你怎么不追呀？”
杨继业久经沙场，岂不知追杀溃敌最是扩大战果的好时机，但他心中有个疙瘩解不开，不愿意去扩大无用的战果。他冷冷地告诉耶律沙：“制人要制以服，不要制以死，吾意只在守护太原，何必赶尽杀绝呢？”
耶律沙大笑起来：“哈哈哈哈！高论！高论！”他一半儿是嘲讽一半儿是吹嘘地叫道：“老将军真乃仁义之师也！既然如此，我耶律沙可就冲上去，打垮宋南蛮，活捉潘仁美，白拣这个大便宜了！”
他一挥手，三万名辽兵扯旌旗吹号角抡枪抡刀地追杀宋军而去。
杨继业望着这些夷人莽汉的身影远去，只是连连冷笑。
其实，杨继业不愿追杀宋军还有一个原因，那就是宋军在撤退，不是在溃逃，溃兵可以追击，撤兵必须提防，弄不好的话，便宜没得半分，还会吃大亏！这一点儿耶律沙却万万不会想到。
当耶律沙带领辽兵凶猛追杀过来时，宋军元帅潘仁美却强忍住腿上的伤痛，沉着指挥道：“不要乱！大家不要乱！区区三万辽兵在我十万雄师眼中有何惧哉？呼延赞将军殿后，高怀德、高怀亮、石彦超保护陛下和八大王，抢过横山涧安营扎寨！”
逃乱的队伍稍作调整，呼延赞与耶律沙交上了手。
宋军毕竟是一支精锐之师，面对杨家将时他们心有余悸，避开杨家将面对辽兵时，却一扫其懦弱心态，作战勇气大增；呼延赞三五个回合就干掉了耶律沙的两个副将，耶律沙知道上了杨继业的当，这个便宜拣得不是时候，急忙圈马撤军狼狈逃回。
呼延赞带兵追杀了一阵，竟然收获颇丰。
战败之忧没有了，箭伤之痛又袭上潘仁美的心头。他的两个儿子潘龙、
潘虎叫来几个士兵、用一副担架抬起他小心翼翼的随大军撤到了横山涧的南岸。绵延十数里的大营扎起来了，中军大帐也扎起来了。潘仁美这才被抬到中军后帐，请随军郎中给他涂了金疮药，做了包扎。
他疼得呲牙咧嘴，脸上冒汗，还不住声地责骂：“奶奶的！你们速给我打听打听！那个射伤我的小兔崽子姓甚名谁？”
潘龙报告说：“那箭杆上刻有‘杨延嗣’三个字。”
潘仁美立时便知：“杨延嗣，那应该是杨继业的七崽子！”
潘虎安慰道：“爹！您老人家先好好的休息休息，一般箭伤不算重，您就不要想那么多，您不想它，就可以忘记疼痛了！”
潘仁美两只手狠命地抓着潘龙和潘虎的手腕儿，愤愤地叫喊：“我怎能忘得了？我怎能忘得了？这奇耻大辱，我要记一辈子！杨延嗣个小兔崽子，你给我等着！我潘洪日后若不让你乱箭穿胸，誓不为人！”
潘杨两家的仇恨由此就算是种下了根子。
大宋忠臣潘仁美由此也就开始一步步沦落为乱臣贼子。
其实，无论潘仁美在赵宋王朝有多么的资历深深，又有多么的功劳赫赫，对杨家归宋都不应该怀有太大的嫉妒心——招降杨家，有利大宋也同样有利你潘家；两军对垒，各为其主，你杀我斗的本属正常。偷施暗箭在先，负箭受伤在后，若是大度的人定而一笑了之……而宋朝老臣潘仁美却将这点小摩擦铭记在心，甚至因此而嫉妒怀恨，胡作非为，背叛朝廷，甘做奸贼，最终落了个千古的骂名！
说来说去，还是一个嫉贤妒能心理作怪啊！
后人有诗评曰：
潘杨仇怨谁铸成？追根寻源在鸡笼，
奉劝世人多宽让，心底无私一笑容。
