淳熙七年（1180年）冬天，陸遊罷官回鄉，此後五年多的時間，他一直閑居在家。詩人雖受到打擊，但憂國憂民之情並未衰減。在這段時間裏，他寫了許多激越飛騰、雄健豪邁的愛國之作，寄托了詩人立功邊塞、收複中原的豪情壯誌：
腰間羽箭久凋零，太息燕然未勒銘。
老子猶堪絕大漠，諸君何至泣新亭！
一身報國有萬死，雙鬢向人無再青。
記取江湖泊船處，臥聞新雁落寒汀。
——《夜泊水村》
遺虜遊魂豈足憂，漢家方運幄中籌。
天開地辟逢千載，雷動風行遍九州。
刁鬥令嚴青海夜，旌旗色照鐵關秋。
功名自是英豪事，不用君王萬戶侯。
——《聞虜政衰亂掃蕩有期喜成口號》
淳熙八年（1181年），浙東地區大水成災，山陰一帶災情十分嚴重。無數百姓流離失所，賣兒鬻女，屍橫遍野，到處都是慘不忍睹的景象。陸遊憂心如焚，坐臥不寧，很想為家鄉百姓做些解危濟困的事。他並沒有因為自己一年前因賑災被免職而退縮，反而積極地呼籲官場中的故人舊友了解民情，解除民困。當他聽說故人朱熹被任命為提舉浙東常平茶鹽公事，負責救災工作時，就立刻寫詩寄給朱熹，催他及早趕來賑濟百姓，還勸朱熹寬免災區的賦稅，使百姓能得到一個休養生息的機會。當朱熹受到官僚的排擠打擊時，陸遊又寫了書信和詩歌寄給他，勉勵、期望朱熹不計私利，以百姓為重，堅持做對百姓有利的事。
在陸遊閑居了五年多以後，朝廷決定再次起用他。陸遊於淳熙十三年（1186年）的春天被任命為朝議大夫、權知嚴州軍州事。赴任之前，他奉詔入朝，孝宗在延和殿召見他，說：“嚴州是個山水名勝之地，你公事之餘，可以作作詩，消遣一下。”可見，皇帝雖然恢複了陸遊的官職，可並不想重用他，更不想讓他施展才能抱負，隻不過把他看成一個附庸風雅、點綴升平的詩人而已。
這一年的七月，陸遊到達嚴州。在這裏，他看到的依然是官吏貪暴，豪強肆虐，天災人禍，民不堪命。陸遊深感作為一州之長，不應該讓這種悲慘的現象出現在自己的轄地。他到任不久，就提出了減輕賦稅、廣施救濟的施政方針，同時采取各種措施發展生產，救災安民。一年多以後，嚴州地區果然發生了可喜的變化，莊稼獲得豐收，百姓生活有了改善，所轄縣區沒有流亡的人口。以至於陸遊離任很長時間以後，當地的百姓還在感念著他的仁政，深深地懷念著他。
淳熙十五年（1188年）七月，陸遊任滿離開嚴州，回到故鄉山陰待命。冬天又接到朝廷的通知，調他入京任軍器少監，主管兵刃甲弩之類的製造和修繕。陸遊自入仕以來，經曆了三十多年的宦海風波，再次進入南宋王朝中央政權，他把這看作是實現自己愛國抱負的最後機會。因此，陸遊在重返臨安之後，又開始積極地從事政治活動。此時，正值孝宗禪位於光宗，新皇帝登基之時。陸遊便向宋光宗提出了一係列有關治理國家、完成北伐大業的意見和建議。
在內政方麵，陸遊認為最尖銳的問題，是勞動人民的生活太貧困。他主張當前必須減輕賦稅，改善貧苦百姓的處境，這是一切政事的首要任務。這種認識是很深刻的，擊中了當時社會的要害。南宋政府的收入，對內要供以皇帝為首的統治者揮霍，對外還要向金國支付高額的歲幣來保住暫時的安寧，所以對百姓的剝削極其苛刻，除正常的租賦外，還有所謂的經製錢、月樁錢、版帳錢、身丁錢等名目繁多的苛捐雜稅，人民負擔異常沉重，貧富對立極為尖銳。因此，陸遊把減輕賦稅，救民之貧，放在一切工作的首位。他還要求朝廷懲治貪官，抑製豪強，多多考慮貧苦百姓的利益，製止官吏豪強任意欺淩他們，減輕對他們的剝削和壓迫。陸遊認為，隻有推行這種“至平至公”之道，才能達到天下大治。雖然，他的政治理想隻是一種空想的烏托邦，在當時是不可能實現的，但卻表現了陸遊對被壓迫、被剝削人民的深刻同情。