但是西摩尔吓坏了，他决定退出廊坊，用最坚决的速度撤回天津再做计议。西摩尔已经顾不上燕京正在受到清军和义和团曰夜攻击的同胞了。当发现后撤的铁路也遭到破坏时，西摩尔放弃了火车，沿着运河河岸撤退。最大的危险不是不停搔扰他们的义和团，而是饥饿。他们必须想尽办法去寻找吃的，不管生熟，能填饱肚子就行。军马被一匹匹地杀掉了，辎重丢弃了。每天的行军里程不超过十公里，被冷枪射死，病死的联军士兵超过了一百五十人。