王侁因從徵江南有功，出任閣門祗候。太平興國初年，參與討伐梅山蠻，累遷通事舍人。從徵太原有功，遷東上閣門副使、嵐憲二州巡檢，改任西上閣門使。討伐李繼遷有功，領蔚州刺史。歷任幷州駐泊都監、雲應等州兵馬都監。
劉文裕，開寶四年（971年)，起家補殿直、秦隴巡檢，擒獲李飛雄有功，遷軍庫使。太平興國四年（979年），跟隨宋太宗征伐太原，防守石嶺關。太平興國七年（982年），調任高兵馬都監，擊退契丹侵。雍熙初年（984年），領順州團練使，擊退李繼遷進攻。
王侁、劉文裕都經過這麼多的戰事了，皆非不通軍事之人，心中也知道楊業之策很好，但是彼此都接到了宋太宗趙義以大秘法閱後即焚傳來的旨，一幅遼人宰羊圖。
這個時候皇帝用大秘法不留痕跡地傳來一幅遼人宰羊圖是什麼意思還用說嗎？
所以監軍王侁只能反駁了，並且還強地要楊業出戰。
楊業當然不肯了，這不是擺明了要自己去送死嗎？
但是王侁一再言語相激，並指出楊業為降將，不敢出戰，是不是有謀反之意？
話都說到這份上了，楊業也只能出戰了，但是還心存僥倖，一再向潘相求，可以在陳家谷口接應自己。
等到楊業出戰，王侁和劉文裕稍微做了個樣子，就立即率部離開，潘作為主帥都不能阻止。
在這一刻，潘的心都涼了，王侁和劉文裕這是用行告訴了自己，是皇帝要楊業死。不然潘是主帥，王侁和劉文裕又有何膽子敢不聽潘的？
在這一刻，一個兩難的選擇題留個了潘，是留下來接應楊業呢？還是明哲保呢？
王侁和劉文裕已經率部離開了，剩下的這點兵力如果留下來接應楊業，十有八九也要把自己給搭進去，連大宋這最後的銳也要搭進去。
但是就這麼離開，潘過不了自己心裡這一關啊。
突然，潘渾一震，想通了宋太宗為什麼要這麼做。
大宋的銳打了，如果楊業一旦有二心，憑著他在北漢降軍中的威信，與折家合謀反宋復漢，大宋危矣！
雖然以還未發生的事來斷定一個人的生死，在普通人眼裡看來是荒謬的，但是一個合格的帝王則不同，只有提前將威脅扼殺在搖籃裡，才是對自己，對子民最大的負責。
而且潘還想通了，宋太宗為什麼連自己這個主帥也瞞著了，對現在的宋太宗來說，楊業是一個威脅，自己又何嘗不是一個威脅呢？甚至在皇帝心目中，自己的威脅還在楊業之上。
王侁和劉文裕為什麼敢不聽自己的號令，膽敢私自率部離開，必定是有皇帝詔，一旦自己舉異常，此二人必會請出聖旨取自己而代之。
想通此節的潘只能無奈率部離去，並且還留下幾名神手，悄悄吩咐：若是楊業有降遼之意，一箭殺之。
宋太宗聽到楊業的死訊後，悲痛異常，隨後下詔說：“拿兵保衛國家，聽到鼓聲就想起將帥。盡力殺敵，氣節豪邁，如果不追封表彰，如何弘揚忠義剛烈！原雲州觀察使楊業真如堅的金石，他的氣節讓風雲激盪。他本是隴上的雄才，山西的族。投軍隊，誓立戰功。正指揮虎狼般的軍隊，防守邊境報效國家。可是各將領不遵守約定，不上前救援。楊業帶領孤軍，陷沙漠；剛毅忠烈，視死如歸。古人之中，也沒有比他更崇高的了！所以特地舉行典禮，來表彰他的忠烈。如果他的靈魂有知，應道瞭解我的深意。追贈為太尉、大同軍節度使，賜他的家人布帛一千匹、糧食一千石。大將軍潘降職三級，監軍王侁免冠、流放到金州，劉文裕免、流放到登州。”
朝廷封楊業的長子供奉楊延朗擔任崇儀副使，二子殿直楊延浦、三子楊延訓同為供奉，楊延瑰、楊延貴、楊延彬同時擔任殿直。
宋太宗趙義的目的達到了，帝王之最關鍵的一點就是平衡，曹彬打了敗仗，被降為右驍衛上將軍，那麼平衡就會被打破。現在潘背上了楊業之死的黑鍋，降為檢校太保，一下子就又平衡了。
潘也知道皇帝對自己起了猜疑之心，主自汙以求自保，暗中命人主宣揚是自己害死了楊業。
說書人為了迎合大眾口味，對潘進行了醜化，為一代權，與楊家作對，並且勾結遼人，圖謀奪取宋朝江山。
宋太宗見潘如此知識趣，那是非常滿意，這樣的臣子才是一個好臣子嘛，只要朕信你，名聲要來幹嘛呢？
潘家後人從此也悟出了一個道理，想要在大宋朝過得滋潤，名聲是最要不得的。
反觀楊家，按照道理，楊業生了七個兒子，應該子孫興旺了，但是卻被盛名所累，到了宋徽宗時期，連個像樣的男丁都沒了。
你是楊家後人，英雄的後代啊，怎麼可以不伍呢？
。了屬莫你非是定肯務任的險危麼這，漢好兒雄英子老，人後的敵無楊是你，中軍了到
。啊勞功多得這，啊後之敵無楊，樣一了打是像就軍遼的面對，人後家楊是聽一，的多很是還突衝的模規小是但，戰罷然雖遼宋
。烈忠門滿，指拇大起豎紛紛姓百間坊，了爐出》將家楊《，了多太在實材素為因後最，材素筆一了加添又人書說，了場沙死戰又家楊
。啊上手的己自在敗能不可聲名的來得鮮用人先，繼後仆前牙著咬能只，淚無哭是家楊
。宿歸的好最家楊你是就忠盡國為，場沙死戰，們你全就朕，高之此如聲的間坊在家楊你然既，謀的帝皇是就這但，啊耗消的樣這起不經也，生能再家楊
。火香個下留家楊為想是實其，西關在養棄，人之祥不是說其將，記胎的上臉志楊口藉，了去下不撐於終家楊，生出志楊到等
