自初平元年以来，各地逃难的依附徐州者数十万，兖州、豫州人极多。
豫州人汝南人许劭有鉴人之能，深感到不安，对门生附众说：“陶方伯对人，表面上以名声为准，内心深处却注重实绩、亲疏远近。
他对流亡之士虽好，但必不能长久。”
于是舍弃陶谦客卿的优待，渡过长江南下曲阿，投靠扬州刺史刘繇。
其堂兄许靖亦以品鉴士闻名于世，更与党人过从甚密，曾为扬州刺史陈瑀客卿，可以说是袁绍一党，见陈瑀转为吴郡太守，许靖亦帅领乡党南下。
刘繇、陈瑀、许劭、许靖皆世之名士、乡党所望，四人长辈也都做过三公，家族影响力很大，短时间内，青州、徐州、豫州随之南逃江东达上万人。
再加上徐州人王朗为会稽太守，王朗为人颇有些虚名，可作为南下的目标，于是世家百姓皆蠢蠢欲动。
徐州淮浦、淮阴距离江东区阿（丹阳）超过500里，期间需要跨过淮河、长江两大天堑，还有中渎水等若干河流湖泊，岂能是普通人能通过！
富有资产的世家豪族们消息“灵通”，不想着抵抗侵略者，却低价抛售土地、宅子、店铺、古董，只为换取马牛、舟船、粮食，以便南下避难。
短时间爆买爆卖引发市场价格发生严重的波动，往往一匹劣马、驽牛、呆驴价格上万，一石粮食长到两百钱以上，一亩地却只值不足千钱。
淮北泗西的田宅甚至无人问津！
广陵太守赵昱、下邳相笮融麾下的官吏士卒，利用必经之地的地理优势，做起镖局业务，转运一个人到江南往往往往要数千钱！
这种情况，让陶谦十分忧虑：“许劭兄弟南下，引发徐州百姓动摇，士卒思归，端得可恶十分！”
恰好这时候依附的兖州流民打开城门做了带路党，至使一县为曹操攻下，徐州诸将官吏陷入恐慌。
在曹豹等将领、徐州世家劝说下，陶谦下令限制和审查流民，只要是兖州东郡、济北郡、豫州谯县等兖州军根据地的士人百姓皆列为重点审查人群！
。。。
一日，刘备遇到笮融侄儿笮德抓捕一批兖州人：“这些人身体强健，正好当兵吃粮，为何抓捕？”
笮德：“刘青州身在高位不明下面的情况，正因为这些人身体强健，就更可能是曹军探子！”
“刘青州？”一个高壮的汉子大喜，“刘青州救我，我便是来投军的！”
刘备：“你为何参军？”
小人：“仇恨曹操破坏兖州，屠杀徐州，故要参军。”
笮德说：“阿弥陀佛，贫僧不打诳语。这人是兖州东郡人，最是危险，又无人作保，因而不仅不能参军，还在驱逐之列！”
潘璋：“小人潘璋，若给小人一把长戟，能敌数十人，如此本事为何做奸细。”
刘备心中大吃一惊，此人竟然叫潘璋，但他到底是不是历史中那个东吴十二虎臣之一的潘璋？
糜竺对笮德说：“曹操残暴，赤地百里，人民弃之。今天人归陶方伯，说明陶公乃德之所归，人之所归。不宜堵塞人民来归之路，以失众望。”
诸葛玄：“外郡人窘迫来投靠徐州，乃是因为曹操残暴，令儿女失去父母、妻子失去丈夫。你们怎能说外郡人是奸细呢？况且一人可以是奸细，数百人会都是奸细么？”
刘备压制住心中惊讶，点点头，以表示认可:“笮德将军，你怎么说？”
笮德：“刘君侯，非是我等一定要驱逐他们，确实在前面便有兖州人、豫州人偷偷打开城门，以至于彭城城这么高大坚固的城墙，终究被攻下，曹宏校尉狼狈逃回，城中居民被屠戮无数，流血漂橹，方伯这才命令我等甄别善恶，索拿不明人等。”
刘备训斥道：“陶方伯令你们甄别奸细，并不是让你怀疑所有兖州、豫州人，而是要拿出证据，你有证据呢？”
笮德：“证据到没有，但他们口音不一样，经过查验，他们是东郡人，为首的这个潘璋，乃东郡发干人，是奸细的可能性最大。”
刘备被气笑了：“你若仅仅因为他们是东郡人，便怀疑他们，将东郡人都归为敌人，这既不是仁者所为，也不是智者所为。”
又指着旁边的荀攸，“这是荀攸，大汉名士，乃是我的谋主，他是豫州颍川人，那边唱戏的蔡璇，豫州陈留人，还有典韦都尉，亦陈留人，难道你是说他们也是奸细么？”
。。。
张飞：“毕竟是兖州汝南，可不能让奸细知道我等底细，不若挑其中几个，抓起来问问？”
诸葛玄说：“杀鸡焉用牛刀，郦大人鞍马劳顿，张将军作战辛苦，些许小事，交给我等便是。”
刘备也欲看诸葛玄，诸葛瑾叔叔侄儿能耐，便自然同意。
诸葛玄便带人将他们分开安置，然后派人好生抚慰，送些吃食、粮食、布匹，以安其心，接着拉起家常。不多时间，便摸清了这群人的底细。而后将其中领头的几人，带了过来。
刘备见了领头人，这汉子已经换过衣服，又养了二天，吃得饱饭，虎背猿腰，身体甚为健壮。
这领头报上名字：“小的东郡潘璋，拜见刘方伯。”