在聂荣臻来教导团之前，徐光英应该已经传达过类似的撤退命令，而且教导团团部也有人在总部见过纽曼，预先知道部队要撤走，因此教导团团部撤得很快，相应命令也能够逐级传达下去。
赤卫队方面就不同了，周文雍已经转入地下，黄锦辉去了赤卫队总司令部也找不到他。黄锦辉终究不是工人领袖，他对工人和赤卫队的情况也远不及周文雍那么熟悉。况且，即便他可以一个联队一个联队地通知，这些联队多数分散在各个区域作战，要想全都通知到也非常困难。
事后中共中央批评起义军指挥部在撤退时毫无计划，“群众完全不知道”。如果说撤退是不得已而为之，但撤得确实是过于慌乱和仓促，乃至于有些人完全是靠机缘巧合，才知道要撤离。
徐向前原来指挥第六联队在观音山作战。傍晚时，随着战斗渐趋紧张，联队的伤亡越来越大，人员也越来越少，最后就被打散了。由于通往主力部队与指挥部的道路被敌人截断，徐向前只得跑到公安局找徐光英，想请示下一步应该怎么办。谁知到了那里一看空空如也，办公机关已经全部撤走了。
幸运的是，徐向前在离开公安局后，恰巧就碰上了他在武汉黄埔军校任队长时的区队长朱先墀。朱先墀在教导团任职，正好路过，他看到徐向前感到很惊讶，就跑上来说：“老兄，你还在这里干什么？人家都走了，你还不走？指挥部早已下命令撤退了，快，到黄花岗集合。”