而良字乡一带则是中路清军和左路清军的必经之地，这个区域内的百姓周士相统一指示往香山县城撤离，其余散落村庄若是不能及时参与撤离，则就近疏散到附近的山中。
除去往新会撤离的百姓，对于其他人来说，香山其实并不是真正的安全地带。清军的首要目标就是香山县城，一旦县城被清军攻占，那城中的百姓百分百会遭到清军的血洗。所以将大量百姓往香山县城转移，某种程度上不是让他们得到安全，而是让他们陷入绝地，好比请君入瓮一般。即便是远在后方的前山寨也不安全，因为香山没有足够的纵深可以防御清军，一旦县城失守，前山寨的失守也不可避免，到时等待香山百姓的还是噩运。
因此很多人反对将百姓往县城迁移，他们提到最多的就是把百姓都迁到县城，那清军一来就谁也跑不了。若是不迁，百姓散居各乡各村，即便会受到清军屠杀祸害，最终也能活下一小部分来，不致于被杀绝，毕竟百姓们对于自家周围的地形要比清军熟悉。清军真来了，他们怎么也能找地方躲。全到香山县城来，那就是想躲也没地方躲了。
这一点周士相不是没有考虑过，但他还是力排众议坚持要进行撤离行动。
香山北部集中了三四万人口，原先太平军的