当这些利益放在手中的时候，吕布的本来面目就暴露了，马上派高顺带兵五万，去攻击刘备的后方，刘备知道这个消息后，乘着阴雨气，马上撤兵，大家商量着方案，想要往东边去取广陵。
等到高顺军按照时间到达地点，刘备已经离开了。
高顺看到了纪灵，两人进行了会见，就按照要求向他索要物资。纪灵道：“还请先回去，容我向主公禀报！”
于是高顺就和纪灵道别，撤军回去，将实际情况都告诉了吕布，还谈了谈自己的看法，吕布感到有些迟疑。
忽然有人报袁术的寄过来了一封书信，吕布拆开看了内容，道：“高顺虽然按照要求来了，但是刘备还没有除去，等到抓了刘备，再将那些物资送给你们！”