章乃器在他的《七十自述》裏，記述了這次談話的內容——
……周總理對我說，要撤我和章伯鈞、羅隆基的職，馬上就要提交國務會議討論，已經告訴了伯鈞、隆基兩人，而且不讓他們出席會議，但是可以讓我出席會議申辯。我問，我寫的《根據事實，全麵檢查》的材料有沒有看過？他說沒有。我說，那是很遺憾的。我問，撤職的事情是否最後決定了？他說，黨中央決定了。我說，那還申辯什麼呢？我願意放棄出席的權利。他說，那也好，辯論起來我們人多，你說不過我們的。他又說，也曾考慮讓我們辭職，可是又何必那樣轉彎抹角呢？我說，撤職倒沒有什麼，但為什麼要扣上反黨、反人民、反社會主義的罪名呢？這是違反事實的，是寧死不能承認的。他說，那你可以保留思想，我們黨是準許保留思想的。
於是，他又談到和羅隆基談話的經過，他曾問羅作何打算，羅答要麼就自殺，否則便隻好接受。總理說，你可以去美國。羅問，是否意味著驅逐出境？總理答，絕不是。總理問我作何打算？我說，我是全心全意、全力投向黨的，黨給我處分，我願意積極接受下來，作為黨對我的鍛煉和考驗。我和黨共事已經三十多年了，仍然沒有被了解，那就請再看五年吧，五年不夠，也可以看十年，到那時我也不過七十；我現在開始就好好地鍛煉體格，充實頭腦，準備到時再為黨工作十年。總理笑著說，你倒真樂觀呀。最後，我重申，我是永遠不反黨的，我要使那些誹謗的流言，徹底地破產。
——（《文史資料選輯》第82輯）
撤職後的章乃器，決意要履行他對周恩來許下的諾言，將家居生活安排得井然有序，每天手不釋卷，讀了大量的馬列毛經典著作和各方麵的專著，寫下了數百萬字的筆記。此外的時間便化在了強健體魄上：氣功，腰腿八段錦，每天還堅持做25個俯臥撐，又在浴室裏摩擦全身二千多下。他的氣功達到了很深的造詣，一呼一吸的時間可長達數分鍾，一般的運動員也難以企及。他曾把自己對氣功的領會寫成了稿子，打算日後有條件時再整理出書……