西边的防线上，日军始终无法突破守军在交通银行这里设下的防线，而北边的日军在靠近了四行仓库外围防线之后，在火炮的支持之下，又加大了进攻的力度，并且从几个方向上试图突破阵地。可是面对阵地上密集的火力，日军想尽了办法也不能取得一点突破。见日军的炮火很凶猛，而防线上还可以守得住，王海涛也没有动用楼顶上的几门重迫击炮。
整整一天，四行仓库除了北墙上被开了不少天窗外，倒是没受到什么损失，士兵伤亡情况也不严重。西面更是除了街心工事被日军的炮火炸坏了不少处外，士兵也同样没受到什么损失。如果照这样继续下去，这个四行仓库守上半个月也没有任何问题。
晚上八点钟，吃饱睡足了的侦察连又在唐小山的带领下，一头钻进了黑夜中，王海涛除了吩咐唐小山他们要小心一点外，仍然没有对他们布置什么具体任务。对于这些自己一手带出来的战士们，王海涛还是比较信任和放心的。唐小山他们也一定不会让王海涛失望。
夜里敌人的占领区里，又热闹起来，东面一阵枪声还没有平息下来，西面的爆炸声又响了起来。看着不时热闹起来的日军占领区，王海涛无声的笑了。
日子就在日军进攻的枪炮声中又度过了二天，十二月二日，在离租界如此接近的地方连续生这样激烈的战斗，引起了租界内外籍人士的严重不安，这些外籍人士先是向南京政府提出了片面停战的请求，又向日方施加了压力，要求日方对四行仓库的军队停止攻击。
此时苏州河南岸防守的部队已经全部布置到了阵地上，准备工作也都就绪，而四行仓库的保卫战也己成功的引起了列强们出面干涉。对于蒋介石来说，目的己经达到，那么四行仓库再坚守下去也就失去了意义，因此在十二月三日早上，蒋介石对四行仓库的守军亲自下达了撤退的命令。
命令到达中路军指挥部后，朱绍良将军第一时间用电台向王海涛做了传达。王海涛接到命令后把谢晋元等几名指挥官叫到了指挥室，并对他们传达了中路军总司令朱绍良将军下达的撤退命令。谢晋元不解的问道：“王师长，以目前的情况来看，我们再坚守十天甚至更长时间都不会有问题，为什么要这么急着撤退呢？”
王海涛答道：“谢团长，现在日军拿我们没有办法，是因为日军有所顾忌而没有动用大口径重炮，再坚守下去，万一日军不管不顾的动用飞机和重炮，你认为这四行仓库还能守的住吗？”谢晋元大声说道：“我们五二四团的官兵愿意全部战死在阵地上。王师长你还是带着你的人先撤吧。”
王海涛心头一阵火气腾了上来，沉声问道：“谢团长，我王海涛和新九十师的弟兄们是贪生怕死的人吗？什么叫我们先撤？怕死我还会带人过河来吗？”谢晋元知道自己的话说冒失了。怕说道：“王师长，对不起，我不是这个意思，我只是愿意和战士们死守在这里，直到最后。”
王海涛脸色一缓，说道：“我王海涛佩服谢团长有舍生取义的勇气，可是为什么要全部战死在这块己失去防守意义的死地呢？要知道‘存人失地人地皆存，存地失人人地皆失’这个道理。我们要想尽最大的可能去打击敌人，就不要在乎一城一地之得失，保存了自己才能寻找到更好的地方，更多的机会打击敌人。这四行仓库己是孤地，我们也是孤军，我们撤离这里后，在苏州河南岸，凭借苏州河这一有利地型，不是能更好的打击日军吗？”
谢晋元他们听了王海涛的一番话，不由的连连点头，谢晋元说道：“王师长，我错了，下面由王师长来全权安排，我们完全服从命令。”王海涛点了点头说道：“白天撤退是肯定不行的，我们只有在夜里才能安全的渡过苏州河，我的侦察连要在明天早上才能回来，这样，明天下午全体战士撤回四行仓库大楼，明天傍晚我会安排一次对日军的炮击，然后我们在明晚撤回苏州河南岸。”
为了不影响战士的情緖，撤退的命令暂不下达，待明日战士们都撤回来后再下达。现在该怎么守还是怎么守。决定做出了之后，王海涛又用电报向朱绍良将军做了汇报，朱绍良将军也同意了王海涛的计划。
大楼外，日军的炮火仍然密集，攻势也没有丝豪的减弱。五二四团的官兵与警卫营的官兵相互配合着，力保阵地不失，王海涛上了楼顶，在楼顶上指挥着几挺重机枪对进攻的日军进行压制和打击，在日军攻的非常凶猛时，还不时的用迫击炮反击一下。
第三师团的师团长藤田进中将对日军几天的攻击都一无所获也是很不满意，但是看到四行仓库楼顶的二面旗帜还在，又考虑到支那军的新九十师强悍的战斗力，也就对手下不再指责什么了，反正把支那军的新九十师主力拖在了这里，也算是完成了上面下达的任务。
十二月的二号，攻击了一天的日军同样是一无所获，而且夜晚也得不到好好休息一下的日军，也已疲惫不堪。十二月三日凌晨，侦察连的战士连同唐小山再一次回到了四行大楼，这次有二名战士受了点轻伤。王海涛喊来唐小山，对他说了今晚全军将会撤离四行仓库之事。并要他们侦察连在下午摸出仓库，为部队的顺利撤退打开道路。
唐小山欣然领命后下去休息了。三号日军又出动了飞机对四行仓库进行轰炸，虽然楼顶上有对空火力的射击，但日军这次显然没有第一次那么好说话，在损失了一架飞机的情况下，仍然把一颗炸弹扔在了楼顶上，这颗炸弹没有破坏大楼，但是楼顶上一挺高射机枪，一挺重机枪被炸坏了，还有十几名战士伤亡，连机枪连的雷连长也负了伤。
日军仍然是一成不变的向守军阵地动着一次又一次的进攻，守军也按布就班的进行还击。双方互有伤亡，但是占有地利的守军伤亡数量要少的多。中午，王海涛下达了撤回四行仓库内的命令，各处防线上的战士们有序的撤出原有的阵地，回到了四行仓库大楼中。