在他被降级之后的一年时间里，虽然有过三次升迁，但没过多久便与世长辞，终年 67岁。这里便能看出潘美在此次事件中并不负有重要责任。

到了明代，民间却把杨家将的故事编写成了《杨家府演义》。

在这部小说中，杨家将喋血沙场，舍身报国，可谓是宋朝的顶梁柱。而故事中为了衬托出杨家将的忠义形象，便塑造了一位名叫潘仁美的奸臣。

此人用尽阴险的手段迫害杨家，简直可恨到了极点。作者可能是为了蹭流量，把奸臣潘仁美的名字设计得与潘美相似。

所以潘美就被民间定义成了潘仁美那样的形象。再加上小说演绎以及影视作品的传播比真实的历史更为广泛，所以大多数人会把潘美当成奸贼之中的标杆人物。

通过正史与小说对比，两潘之间的形象是截然不同，甚至可以说除了名字之外没有任何关联，完全是《杨家府演义》的作者通过杨业事件激发灵感而想象出来的剧情。以至于潘美被黑化了如此之久。

——“潘美还好，潘仁美才是最惨的，被人黑了多少年了，实际上根本没有这个人。”

——“没有吗，我还以为有呢，故事信誓旦旦的。”

——“古代故事不都那样么，不写的真实点，也没人看啊。”