在民间评书《杨家将》中，潘美被丑化为奸邪的“潘仁美”，称他公报私仇，陷害忠良，导致杨业在李陵碑前死亡。事实上，历史上杨业之死，主要负责人不是潘美，而是缺乏作战经验却掌权的监军王。据《宋史》记载，当时部队的任务是掩护各州人民撤退内地，而王淑则强迫杨业进攻。杨业自知敌众我寡，难以取胜，于是要求王、潘美在陈家谷口(即演义中的两狼山)默认强弩步兵接应。
杨业是个好将军，他认为北宋军多为步兵，要对抗契丹骑兵必须依靠强弓硬弩。但在实战中，王淑为了争功，率领接应人私离防地，后来发现战局不好，又临阵逃亡。杨业杀破辽军重围，赶到陈家谷口，却无人接马，“抚慰大痛，再率帐下士兵力战”，全身受伤数十处后被俘，绝食而死。据宋史介绍，潘美支持杨业的立场，但并没有阻止监军王淑私离防地，而不是“罪魁祸首”，这也证明了战后的处罚——潘美被降职，王淑被撤职。
事实上，潘美对宋朝的贡献是相当大的，应该超过杨业。在《宋史》中，潘美位于列传第十七位，而杨业只有列传第三十一位，排名差了很多。从传记功业的角度来看，潘美抚陕帅袁彦、协平李重进、协征岭南、广北门役、征江南，说降陈、打北汉、打太原、抵辽军，他的成就应该远远高于杨业，他有更多的政治眼光，可以说是一位政治家和军事家。此外，据非正史记载，宋太祖有私生子，对太祖不利。太祖不知道该怎么办。赵普等人劝他杀人。只有潘美知道太祖的心事。不言而喻，太祖指示潘美收养，可见仁慈。
然而，艺术作品太强大了。经过讲故事和戏剧渲染，很少有人知道潘美的成就，只知道“杨家将军”，形成了“文化冤案”。潘美形象的歪曲可以追溯到元代，元杂剧《八王开诏救忠》、明代出现的话本小说《杨家将演义》、为了突出杨家将的忠诚和勇气，《杨家将传》通过虚构夸张的艺术手法歪曲和丑化了潘美。在历史故事的改编和处理中，为了吸引读者，作者经常用艺术来掩盖真实性，民间口头交流使故事具有强烈的戏剧解释组成部分，导致历史事件和人物的扭曲和误解。这样的“文化不公正案件”在国内外并不少见。
潘美在杨家的故事中作为一个负面人物来衬托杨家将的忠诚和勇气，激起了无辜的诅咒。然而，历史上真正的潘美为北宋统一做出了巨大贡献；在招远监督金矿为当时的国家财政和招远的巨大发展做出了巨大贡献，他的历史成就应该得到肯定。开玩笑不等于历史。我们应该客观地看待历史事件和人物，区分历史的真实性和艺术形象，根据真实记录对功绩进行评论，恢复历史，这才是对历史的真正尊重。
潘仁美陷害了杨家将的真相：评书捏造的文化冤案