在袁术得知吕布奇袭徐州之后，星夜差人到吕布那去，然后许诺给吕布5万粮，战马5万匹，金银一万两，彩缎1000匹，让其夹击刘备。吕布大喜令高顺领兵五万去袭击刘备。而刘备这个时候呢？在去东边去广陵，最终商量的结果就是先去占了广陵。之后高顺带兵前来的时候，刘备已经离去。高顺只好与纪灵相见，高顺就问纪灵索要袁术承诺之物。纪灵说：“你先回军，容我见主公将情况告诉他，由他定夺。”高顺拜别纪灵的军队，回去见吕部，将纪灵的话告诉了吕布，吕布就很迟疑啊。忽然接到袁术的书信，意思说：“高顺虽然来了，但并没有捉到刘备，高顺来之时，刘备已经走了，我们夹击刘备的这个事情并没有发生，只有将刘备捉住后，才会将承诺之物全部赠予你。”吕布看后大骂袁术失信，欲起兵伐之。陈宫就说：“不行，袁术居寿春多年，兵多将广，城高粮足，不能轻取。现在不如请刘备回来，还住小沛，成为我们的羽翼。他日攻伐袁术可令刘备为先锋，等实际已到，先取袁术后取袁绍可纵横天下。”吕布听言后令人着书信迎回刘备。刘备派兵去东取广陵，结果被袁术截营，兵将折损大半，再加上士兵们知道了徐州城丢，士气低下，好在徐荣治军有方，虽然士气低下但还算稳定，但也恐坚持不了多久，一旦粮草用尽，恐会炸英。退兵的时候刚好碰见了吕布的使者。呈上书里，让刘备还住小沛，刘备大喜，但是关羽和张飞都说：“吕布乃是无意之人，不可轻信”刘备说：“他既然好心待我，我又何必疑之。”主要是现在也没有别的地方去，而且军心不稳，现在有人给了一块地盘，就有了喘息的机会。随后来到了徐州，吕布恐刘备猜疑，便亲自迎接，站在门口亲自迎接刘备。张飞恨，不肯一同前往，于是在门口守候等刘备。刘备见了吕布以后拜谢。吕布说：“非我要夺城，而是令第张飞在此恃酒杀人，恐有失事，所以我是过来帮其镇守的。”刘备说：“这座城我早就想让给你了，我不愿意拿”。吕布假意再把徐州让给刘玄德。刘备拒绝，只愿意驻扎在小沛，关羽心里不爽。同时，刘备问：“可否归还我家眷？”吕布说：“您的家眷在我攻入城后就已经逃走了，您的府中有一条通往城外的隧道，所以您的家眷早已离开了，我还以为您已经和您的家眷汇合了呢！没想到尚未碰到呀！那我也赶快派人去寻找”。这时，张飞进来了，恨恨的看了吕布一眼，对刘备说：“来福带着家眷以与军中会合，现在就在城外军中。”刘备拜谢吕布：“不用了，已经找到了，我这就前往小沛”。
原来当日厮杀声起后，我就知道张飞今天喝酒误事了，然后就见他杀了出去，我就知道大事不妙，安全起见立刻令亲卫守住密道入口。然后我迅速带领着两位夫人家眷立刻通过隧道逃跑。我们先走，并令他们全部进入隧道，并且入口封死。亲卫进隧道时，将我提前准备好的石头逐步抱进隧道，然后从最后一个进入隧道的开始放石头，逐步将隧道封死，然后命分三段埋伏，隧道入口封死处必须等我们先跑十分钟，也就是600息后才能撤退，后面两处逐步看到前一处人撤退而来才可后退，若等不到前一处撤退的人，第二段需等到1600息方可撤退，第三段需3000息方可撤退。所以我们早就妥善跑出了徐州城，然后在城外据点静等消息后，得知刘备回到了徐州，然后派亲卫过来打探消息。后得知刘备进徐州城和吕布议事，我带领家眷来到军中汇合，见到刘备后，刘备抱着我说：“痛煞我也，差点以为见不到你了，索性还好来福无事，”然后就抱着我就哭。我对刘备说：“放心有我在，家眷定不会有任何事”。来福必不负主公托付。张飞见了我，讪讪的笑了笑，我没有理他，我打算目前不理，一定要狠狠的晒他几日，让他长长记性。不过最后我还是对张飞说了一句话：“也不知，何时才能真正长大！”话毕转身就走，张飞的脸阴沉的十分难看，关羽长叹一口气，刘备也没有说话。