他的措施是：
一、召集部分團以上幹部，統一思想，對撤退作周密部署。
二、電告留守桃花島的師副政委李清泉，要求迅速收集船隻接應。
三、部署各種佯動迷惑敵人、隱蔽我方的意圖和掩護撤退的作戰方案，交得力幹部執行。
四、嚴密策劃部隊集結、起渡的順序，製定多種應變方案。絕不能留下一個戰友
撤退的決心，於5日12時左右形成，並立即傳達組織，於傍晚開始行動。
根據敵人不善夜戰的特點，幾天來形成了白天敵攻我守，夜間我攻奪回失地的規律。由183團團長杜紹三和182團參謀長劉正昌各率一個營(經三天苦戰，實際人數有限)對敵實行佯攻，掩護部隊由海上撤退。當時估計渡海用的船隻很少，整個撤退時間至少需五六個小時。在此期間，絕不能讓敵覺察我方的意圖；萬一敵人察覺，這兩個營就必須把敵人堅決頂住。9連連長、戰鬥英雄夏少卿，帶領由7、8、9和機炮連收集起來的人員組成的7個小分隊，每個小分隊5至7人組成由排長或老班長帶隊，各小分隊配輕機囧槍一挺，多帶炸囧藥包和手榴彈，入夜後，摸到敵火力點下麵，然後突然開火，步囧槍、機囧槍囧、手榴彈、炸囧藥包、衝鋒號響成一片，團迫擊炮也向敵開火。敵人被打得暈頭轉向，隻是龜縮在掩體裏亂放槍炮。隔了半小時，小分隊又幹一次。到第三次後，聽不到迫擊炮的聲音。夏少卿知道，團部已經撤走，島上隻剩下3營了。他給分隊作了動員，要求第四次要打得更猛烈。這就使敵人無法摸清我軍的真實意圖。直到午夜，營部通信員來通知他們撤。他們到了渡口，見營部和7、9連的船已開走，他帶9連2、3排登上船，但9連的7班還沒有來，大家都在船上靜靜地等著。敵人的炮彈在船周圍濺起股股水柱，但大家隻有一個心願，要死大家死在一起，絕不能留下一個戰友。十多分鍾後，9連7班來了，船才緩緩向桃花島駛去。在最後撤離的人中，還有l82團參謀長劉正昌，這位多年與胡煒一塊兒出生入死的戰鬥英雄，被胡煒選中作為“殿後”，給他的任務很簡單：你一定要掩護到走完最後一個人；如果敵人發現我們的意圖，一定會拚命攻上來。那你們就要堅決頂住，最後能不能回來……。劉正昌知道師長為什麼把這個任務交給自己，他知道這很可能是最後的訣別。他理解師長肩上的擔子，比自己慷慨赴死還要重得多。他不想用纏綿的告別來增加師長的負擔，隻是簡單的回答：“我是共囧產黨員，師長你放心好啦!”二話沒說就去執行任務。
劉正昌指揮部隊輪番掩護，一批批戰士有序地撤回渡口，最後他手中隻有一個班了。他和戰士們一樣，把手榴彈、炸囧藥包放在身邊，嚴密監視著敵人。戰士們催他先走，他不同意，而是讓大家先走，自己帶一個戰鬥小組，又把陣地搜索一遍，確信沒有漏人，才乘最後一條小船返回。部隊在撤退中，還看到了動人的一幕：師長胡煒、副參謀長王超，在渡口指揮，按傷員、烈士遺體、機關、部隊的順序登船。指揮所和師首長與掩護分隊最後撤離。他們沉著冷靜、撤退在後，從容不迫的態度，鼓舞著全體指戰員。在他們登船時，又把僅有的救生衣留下來給後麵的同誌。