与此同时，大量官吏衙役也出现在军队和灾民对峙的街道，深入灾民群中宣传朝廷赈灾政策，让灾民退出城池。
灾民激愤的心情终于平息下来，在官员的安排下，纷纷退出大兴城，军队撤回驻地，只留下左右武侯府金吾卫两万名士兵负责维护安置点秩序，预备官员和国子监学生在朝廷的命令下，前去帮助灾民登记户口。一些响应朝廷号召王公大臣、民间富户也开始跟随官府赈济灾民，被分配到各个营区生火造饭、煮粥。
但也有一些曾经生活条件优越灾民认为帐篷不如房子、床铺住着舒服，便赖在被攻陷的新昌坊、宣平坊、升道坊、升平坊；如此一人影响一家、一家影响一大群，致使四个坊的店铺、酒肆、客栈给挤得满满当当的。
对于这些无赖一般的刁民，担任“赈灾总指挥”的杨素自然没有姑息养奸，他虽然没有像对待军队那般严峻，却也不会毫原则地宽容，那样只会助长坏人作恶之风。
在他一声令下，军队再次开进四坊，先是对这些据坊不朝着的灾民良言相劝，促使一部分盲从的灾民害怕离开，不过还有一些刁民中的刁民自以为是，认为军队不敢在天子脚下动粗，甚至还有不阴不阳的煽风点火、讽刺谩骂。
然而他们很快就为他们狂妄傲慢付出了代价，被他们讥讽了半天的军队等规定的时间一过，便开始暴力驱逐了。
一家家、一群群刁民一般的灾民流民扶老携幼，被早已恼火万分的士兵向城外驱赶，哭声震天；彪悍的青壮若敢反抗，便被棒打鞭抽。一切反抗得厉害的人，被当场斩首示众，变成了儆猴的鸡，但这还远没有结束，最后这千多户蔑视军队的刁民，一律被登记为奴籍。
这便杨素的深得军心之处，为帅时，他为了打赢敌人，治军严峻，将一些不遵军法抓去当敢死队，收到了令行禁止的效果；可是大战结束以后，谁要是敢去蔑视士兵、辱骂士兵，哪个官员敢去虐待伤残士兵，他绝对是第一个跳出来为士兵讨还公道的大臣。
这些刁民不知天高地厚的挑衅军队，无异于自掘坟墓、自我毁灭，落下世代为奴的下场，完全是咎由自取，不值得任何人去同情。
正是强硬驱赶和及时的安抚，终于使灾民的情绪渐渐稳定下来，一家家、一族族都乖乖的服从官府引导，前往三个灾民安置点居住。
灾民的问题是解决了，但是灾民对四坊造成的破坏，令东西二市东主担心利益受损，二市店铺一律关门歇业，不仅如此，甚至京城各坊的店铺也都关了门。京城的危机也从灾民危机转化到粮价危机，粮价也从正常的三十钱步步推高，由此带来的问题是京中粮商囤积居奇，等待时机再以高价出售。
到了第二天，粮价暴涨到了斗米百钱的夸张地步，这绝对是一个会令京城百姓大骚乱、大恐慌的价格。
节节攀升的粮价所蕴含的危机，在某些时候甚至会超过灾民危机，对于这一点，各级官府都有深刻的认识。
事实上，京城并不缺粮。但是百姓人人云亦云之下，盲从大众的大量采购囤积，而设在东西二市的常平仓存储能力有限，当官方以平价把常平仓卖光之后，需要从太仓、广通仓运粮补充，排队等候的百姓见常平仓无粮可信，本能的以为官府也没有余粮，恐慌之下纷纷去私家粮铺采购高价粮，促使粮价进一步提升。