雙方握手之後，帶著各自的部下，步入龍江書院，登上三樓文星閣。參加這次曆史性會見的雙方部下有張子清、蔡協民、何挺穎、王爾琢、伍中豪、胡少海、龔楚、何長工、袁文才、朱雲卿、王佐。
在“文革”中，《井岡山會師》的油畫，被改畫成毛澤東跟林彪握手。其實，林彪當時任朱德手下的第十一軍軍部特務連連長，連登上文星閣的資格都沒有。難怪陳毅罵這位“林副統帥”為“靈牌”。“靈牌”的諧音即“林排”，因為林彪在陳毅手下當過排長！
另外，朱毛會師的油畫，往往把背景畫成井岡山，那帶有藝術的誇張。其實，他倆的第一次握手，是在寧岡縣礱市。
在文星閣，毛澤東說：“過幾天就是‘五四’，我們開個大會，慶賀一下。”
朱德當即讚同。
5月4日那天，礱市河東的廣場上，紅旗招展，鞭炮齊鳴，人頭攢動，熱鬧非凡。毛澤東、朱德兩支部隊，加上方圓幾十裏趕來慶賀的人們，一萬多人聚集在那裏。對於那山區小鎮來說，這是空前的盛會。
大會的主席台是臨時搭建的。就地取材，農民搬來一隻隻禾桶（打稻時用的大木桶），再鋪上門板，很快搭成主席台。上午10時，在萬眾歡呼聲中，毛澤東、朱德等登上了主席台。那天，毛澤東佩了一支匣子槍，很神氣地出現在主席台上。不過，他隻佩了一天槍，這一輩子也隻這天佩著槍。這位“槍杆子裏麵出政權”的提出者，卻不願身上掛著槍。
大會的司儀是何長工，執行主席為陳毅。
陳毅當眾宣布了重要決定，即毛澤東、朱德兩支隊伍合並，改編成“中國工農革命軍第四軍”，下轄三個師、九個團。軍的領導成員為——
軍長：朱德。
黨代表：毛澤東。
參謀長：王爾琢。
三個師的領導為——
第十師師長：朱德（兼）。
第十一師師長：張子清（因負傷，由毛澤東代）。
第十二師師長：陳毅。
所用番號“第四軍”、“第十師”之類，為的是虛張聲勢。敵人聽說了“第四軍”，以為起碼有“第一軍”，“第二軍”和“第三軍”。師亦如此，團亦如此。九個團，從“第二十八團”至“第三十六團”。光是憑這“第四軍第十二師第三十六團”的番號，也夠嚇唬人的。
朱德部隊，其中參加過南昌起義的精兵，有一千五百多人。後來，轉戰各地，特別是在湘南發動暴動，隊伍壯大到八千多人。加上毛澤東的隊伍，一下子達一萬多人，聲勢大多了。自從毛澤東擔任軍黨代表，人們就稱他“黨代表”或“毛黨代表”。
朱德在大會上演說，稱這次會師是中國革命的新起點。他說，“我們為會師而高興，可是敵人卻在那裏難過，那麼，就讓敵人難過吧，我們不能照顧他們的情緒，我們將來還要徹底消滅他們呢”！
毛澤東上台演說時，依然保持他那幽默風趣的風格，使全場不時爆發出笑聲。據何長工回憶，毛澤東當時說了這麼一段話；
現在我們雖然在數量上和裝備上不如敵人，但是我們有馬列主義，有群眾的支持，不怕打不敗敵人，敵人並沒有孫悟空的本事，即使有孫悟空的本事，我們也有辦法對付他們，因為我們有如來佛的本事，他們總逃不出如來佛的手掌！我們要專找敵人的弱點，然後集中兵力打這一部分。十個指頭有長短，荷花出水有高低，敵人也有強有弱，兵力分布也難保沒有不周到的地方，我們要抓住敵人的弱點，狠狠地打一頓，打勝了，立刻分散躲到敵人背後去玩“捉迷藏”。這樣我們就掌握了主動權，把敵人放在我們手心裏玩。