南昌起義後賀龍去湘鄂西拉隊伍，女兒賀金蓮留在上海。當時的上海白色恐怖，賀金蓮自幼體弱多病，這時不僅無法及時治療，而且為了對付敵人的搜捕還要經常搬家藏躲，日日夜夜擔驚受怕，這樣搬來搬去，沒有多少天就把孩子給拖累折磨死了。
賀龍對這個在苦難中出生而又夭折的女兒十分疼愛懷念。後來他回憶起這件事，還悲憤地說：“上海還埋著我們賀家一口人嘛！”金蓮去世二十多年後的1935年秋，賀龍帶領中國工農紅軍第二、六軍團，從桑植劉家坪出發開始長征。
在告別家族時，還從衣袋裏掏出一幅鞋扣絆，說：“這還是金蓮給我做的布鞋上的扣絆！”
賀龍的另一次婚姻是在長征前開始的。他在湘西娶蹇先任為妻（蹇先任的妹妹蹇先佛與肖克結婚）。蹇先任出身豪門，結婚後與賀龍感情甚篤，跟隨賀龍參加革命，出生入死。1935年11月，賀龍正在前方，蹇先任生下一女。當時賀龍正好打了一個大勝仗，王震發電報把這個消息告訴賀龍，電報上寫著：“祝賀賀副主席生了一門迫擊炮。”賀龍看了後非常高興，大笑不止。後肖克為賀龍的這個女兒取名為賀捷生，意為“戰鬥告捷時所生”。
賀捷生出生18天就隨賀龍指揮的紅二方麵軍長征，被稱為“最年幼的紅軍”。她隨紅軍到達陝北後，抗日戰爭爆發。因賀龍南征北戰，隻好把她送回湖南桑植老家托人帶養。直到解放，賀捷生才回到父親身旁。
1942年，賀龍與薛明結婚。一起度過了無數個難忘的歲月。
戰爭時期，為了革命，賀龍與薛明在一起的時間並不多。賀龍戎馬倥傯，今日陝甘寧，明日冀中、晉西北，轉戰於黃河兩岸，出沒在敵前敵後，然後就是跨越秦嶺巴山，進軍大西南。兩人少有短暫的相聚，多是長久的離別。
1944年9月，陝北延安連降大雨。28日，薛明為賀龍生下一個男孩。毛澤東當即給賀龍打去電話說：“賀龍同誌啊，恭喜你半百得子……”
1944年薛明懷有身孕時，賀龍的老搭檔關向應即為要出世的孩子取好名字。
當時，關向應與薛明商量說：“如果是個男孩，應該找一個我們大家都喜歡的名字給孩子。大家都喜歡嶽飛，所以孩子的名字應該同嶽飛的名字有聯係。嶽飛的字是鵬舉，名字要有‘名’有‘字’，所以就要在嶽飛的名和字中各取一個，就叫‘鵬飛’好了。”不久，關向應病逝，賀龍十分難過。為了有紀念意義，賀龍和薛明商量孩子的名字就叫“賀鵬飛”。
1945年日本投降，國民黨搶奪勝利果實，賀龍率部隊進軍豐鎮、集寧，車過延安的柳樹店的家裏時，保姆抱著賀鵬飛在路邊迎候，賀龍在卡車上伸出手來和賀鵬飛握握手，隻說了句：“長大了當兵。打完仗再見！”然後就驅車遠去。
全國解放後，特別是賀龍一家來到北京後，黨和國家給予賀龍的責任日益重大，他日夜忙於繁重的軍政工作。平時總是清晨匆匆離去，夜晚遲遲歸來，再加上長時間外出開會、視察，和家人在一起的時候更少了。對此，賀龍心裏始終深感愧疚。
林彪整賀龍，被一些人稱作“龍虎鬥”
賀龍這個人看上去粗疏一些，其實對重要事情還是很掛心的。他對林彪一直沒有親近感，不僅是情趣方麵，就是思想路線方麵也有些不和。到了1959年9月，彭德懷罷官，林彪主持軍委日常工作以後，他的感覺更明顯了。
四年前，也是9月，賀龍擔任了軍委常委，開始參與軍隊許多重大問題的決策。那時，在彭德懷主持下，他和徐向前負責各特種兵的工作。1956年又分工由他主管海軍工作。他是個好共事的人，與彭、徐工作很協調。現在，彭老總下台了，林彪主管軍委工作。在當時全黨“左”的思潮的影響下，賀龍從直覺上討厭林彪提出的那一套東西，覺得他有點兒嘩眾取寵，但，那是得到毛澤東讚許的，是對是錯，他一時也說不清楚的。多數情況下，他還是經常從自身的認識上找問題，使自己的思想努力跟上去。新軍委成立之後，他是三位副主席之一，他的觀念是：人在其位就要謀其事，他盡力要為軍隊多做些事情。他很想到部隊去走走，調查研究一番。但是，不久，中央又任命他為中央軍委國防工業委員會主任。這一年，他為國防工業忙得不可開交，根本抽不出時間下部隊去，直到1960年底至1961年初召開的中央工作會議上，毛澤東為了戰勝全國性的嚴重經濟困難，提倡大興調查研究之風，提出1961年要成為調查年，實事求是年，他才實現了下部隊調查的夙願。