亭林橋戰鬥之後，日軍在黑暗和大雨之中失去了與獨立45旅的接觸，後來雖然派出多架偵察機偵察，但沒有再發現獨立45旅。
柳川平助認為，獨立45旅應當已經北渡黃浦江與主力彙合，然後經昆山撤走了，他命令部隊不要再管獨立45旅，全力向西進攻，占領嘉興，大量殺傷撤退中的中國軍隊。
在柳川平助的命令下，日軍第10軍向西進攻，很快占領了嘉興、
18日，偵察機報來了驚人的消息：奉賢附近聚集了大批中國軍隊，總數高達三萬。
柳川平助嚇壞了，自己的後方居然聚集著一支多達三萬人的大軍，他們是什麼部隊？聚集在那裏要幹什麼？
柳川平助召集軍官開會，大多數人認為，這支部隊是蔣介石留下扯日軍後腿的，等日軍主力深入南京附近作戰之時，這支部隊突然殺出，從後麵襲擊日軍，他們主張立即把18師團和114師團從嘉興地區撤回，首先消滅國軍的這支大軍。
也有一些人不同意這個觀點，認為奉賢地區的三萬國軍不過是被打散的散兵遊勇，湊巧聚集到奉賢而已，派飛機把他們炸散就可以了，不必把18師團和114師團從前線撤回，以免影響對南京的進攻。
柳川平助左右為難了一陣，最後決定，派出部分軍隊向奉賢進攻，探探這支中國軍隊的情況。
第10軍的主力已基本投入戰鬥，現在柳川平助手中僅剩兩個由補充兵組成的第一後備步兵團和第二後備步兵團，每個步兵團由六個大隊組成。
柳川平助命令：第一後備步兵團向奉賢進攻，試探中國軍隊的虛實，第二後備步兵團留守金山衛，防備中國軍隊可能的偷襲。
19日上午，第一後備步兵團向奉賢進攻了。
在齊賢，劉永義、呂誌民、王起鳳等人正在商量對策，手頭的這夥烏合之眾當然不可能抵擋日軍，他們因而決定：立即把部隊分散、隱蔽，隻派少數部隊前去騷擾敵人。
劉永義帶了一個排前往奉賢，打算指揮陳吹雲的警衛連去騷擾日軍，呂誌民和王起鳳負責把部隊分散、隱蔽。
中午12時，劉永義帶著警衛連出了奉賢，一百多人的警衛連向著一萬多人的第一後備步兵團開去。
一點半，劉永義到達莊行鎮。
劉永義把部隊一分為二，兩個排由陳吹雲率領，在莊行鎮後方兩公裏的地方構築工事，自己帶兩個排在莊行鎮前方兩公裏的地方阻擊日軍。
劉永義耍了一點小花招，他弄來了很多旗子，一部分是青天白日旗，大部分是亂七八糟的其它旗子：縣政府的“愛民如子”、江湖醫生的“華佗再世”，酒店的“太白遺風”。
劉永義把弄來的旗子到處亂插，弄得到處都是旌旗。
布置好陣式之後，劉永義坐到地上，背靠大樹，他拿出一根雪笳，點燃後吸了起來。
“小日本來了，看到這麼多旗子，一定以為我們人多勢眾，然後他們就會小心翼翼，然後就會調來很多飛機大炮炸個不停，用幾麵破旗子換小日本的大批炸彈炮彈，賺！太賺了！”噴出一大團煙霧，劉永義眉飛色舞地說道。
“就是，就是，劉縣長，你真厲害。”馬青山急忙拍馬屁。
“學來的，學來的，從《三國》上學來的。”劉永義裝出很謙虛的樣子。
第一後備步兵團、第二後備步兵團由經過訓練的補充兵組成，職責是向遭受損失的作戰部隊補充士兵，通常不擔負作戰任務，因為這個緣故，第一後備步兵團、第二後備步兵團的士兵很多，軍官則很少，重武器基本沒有。