山下到菲律宾就任时，曾有部下建议他留在马尼拉，但因为听说前任黑田的一大罪证就是“过于享受马尼拉的舒适生活”，所以山下马上拒绝了。
山下的司令部“樱兵营”位于马尼拉郊外，与市区相距有10千米。山下、武藤和大多数新任命的幕僚一直生活在“樱兵营”里，很少去马尼拉。山下自己只去过市区两次，一次是到任后巡回拜访，另一次是出席寺内的招待宴会。
山下或许觉得放弃马尼拉没什么了不得，驻扎在马尼拉的日军官兵就不会这么想了，他们知道只要一离开这座都市，自己就将从此告别夜夜笙歌、吃喝玩乐的日子，天天饿着肚子去钻山沟。
山下决定亲自示范。12月26日，麦克阿瑟在莱特岛发动“圣诞攻势”的第二天，山下将司令部先行迁往马尼拉北部约50千米处的怡保。这样一来，官兵知道放弃马尼拉已经铁板钉钉，遂不得不跟着撤离。
山下准备等马尼拉全部撤离后，再将司令部迁往碧瑶，但有一个人始终不肯挪窝，这个人便是第四航空军司令官富永恭次，此君一直嚷嚷着要航空决战。
实际上，第四航空军的飞机已经全部损失了，日本国内补充的飞机又经常中断，哪儿有什么能力进行空战？这一点即便富永这样的外行也看得出来，他这么说，不过是像一般贪图享受的官兵一样，无心离开马尼拉而已。
没了飞机，燃料就多余了，而山下因为转移物资的需要，正好缺乏燃料，便提出进行调剂。与第四航空军一接洽，富永的高级参谋答应了，不过他不知道富永能不能同意。
趁着富永高兴的时候，这位参谋提心吊胆地提出了这个问题。富永听后脸色立刻为之一变，用鞭子敲着桌子训斥道：“岂有此理，方面军（指第14军）为什么要逃到山区去？我能给逃兵加油吗？”
训完部下，富永连带山下都给骂了：“应该把山下捆住，让他死守马尼拉，我第四航空军今后还要继续进行航空决战！”
空架子的第四航空军既不肯给山下的转移帮忙，自己也不愿撤出马尼拉，这让南方军总司令部和大本营都着急起来。南方军参谋长饭村穰中将、参谋本部第一作战部长宫崎周一少将先后来到马尼拉进行协调，但富永像一头拽不动的老牛一样，无论谁做工作都充耳不闻。
第四航空军原由南方军总司令部直辖。见富永油盐不进，饭村只得采取强硬措施，临时将第四航空军划归山下指挥，要求富永必须服从山下的命令。
饭村以为这下可以解决问题了，不料适得其反。富永自恃做过陆军省次官，又是“东条派”，对遭东条排斥的山下既不屑又敌视，现在南方军要他服从山下的指挥，犹如在刮他的老脸皮，如何忍受得了？
富永一边拒绝划归山下部队，一边提出辞职。上面不许辞职，他就装病，连第四航空军的司令部也很少去了。让人哭笑不得的是，从山下到饭村、宫崎都对此束手无策，原因就是按照日本陆军的习惯性思维和传统，向来是“越左越好”，富永的那一套虽然不切实际，但谁也不敢对他过多指责或处分。
撤往怡保之前，武藤决定前往第四航空军司令部，最后再劝富永一次。武藤和富永是陆军士官学校的同窗，私人关系也不错，武藤认为自己应该能打动富永。不料他刚刚开口，富永就火了，骂声一直传到屋外。
吵着吵着，这二位索性爬上铺着大地图的桌子，盘腿坐在地图上互相瞪着对方。
富永唾沫星子横飞：“我决不离开马尼拉，打算死在马尼拉，以此向敢死队谢罪！”
武藤则说，山下放弃马尼拉是为了打持久战，是为了尽可能把美军拖在北部山区，推迟其进攻日本本土的时间。说到激动处，武藤直接批驳富永所谓的死守马尼拉，只不过是为了顾全他个人的面子罢了。
富永被人触动心思，腾地站了起来，他穿着长筒靴站在地图上拼命反驳，声音都发抖了。
一直到傍晚，除了对骂，两个人并没能争出任何结果，富永始终不肯改变他死守马尼拉的主张。