当华盛顿赶到之时，在他的眼前，是一片狼狈不堪的景象，他想让逃亡的士兵振作起来，于是骑马去追，然而，那些士兵只顾着逃跑，他追上也是白费力气，他们根本就不听他的话。其实当时的英国士兵还很少，由于美军心理胆怯，在英军一弹未发的情况下就被吓得惊慌失措，慌不择路地逃跑了。华盛顿看到自己士兵这懦弱胆小的举动，满腔愤怒，失去理智地狠狠将帽子扔在了地上。然而，在华盛顿的一生中，类似这样的事情很少发生。许久，他开始平静了下来，思考着怎样才能渡过此次难关，让军队从困境中摆脱出来。随后，华盛顿让人送去了一份急件给北部的人，命令他们必须死守阵地，不能退却，而后又派遣帕特南率领他的军队撤离到哈莱姆高地。
曼哈顿一带地势狭长、险要，最宽的地方不足一英里。华盛顿率领主力军集中到曼哈顿，并把司令部——华盛顿堡，建设在了高地上面，那块高地坚固无比，站在上面俯瞰整个曼哈顿岛，所有的景色都将一览无余。此高地紧紧扼守住了国王大桥，它是通往纽约大陆唯一的道路。而距离华盛顿堡最近的地方则布设有美军的双层防线，由炮兵军队进行驻守，距离此堡一英里。美国的前哨军队驻守在向外的两英里：一支在哈莱姆河左侧由将军斯宾塞率领；一支在哈莱姆河右侧，由将军帕特南率领。而英军的防线，在双方营地之间一片空阔的平地上，距离前哨军队只有一英里半。