但在1933年，德國知識分子中卻出現了許多懦夫。納粹報紙繼續譴責愛因斯坦，宣稱他在國外期間背叛了祖國。學院為了表示對希特勒政府的忠誠，特別發表了一篇聲明，斷絕與這位二十多年來為學院帶來無數榮耀的科學家的一切關係。
"對於愛因斯坦的辭職，我們用不著感到遺憾。"這份正式聲明說，"學院對於他在國外的活動感到恥辱，學院的會員一向忠於國家。"
愛因斯坦認為他必須就這項不忠的罪名為自己提出辯護。"我並不知道我在海外曾散布有關德國的不忠報道。"他寫道，"我已經注意到德國新政府成員所發表的一些聲明並予以評論，尤其是有關企圖毀滅德國猶太人一事……報紙對我作了許多不利的報道，而學院對報紙所發表的聲明，則助長了這種情勢。"
學院的一名代表回答說，就算愛因斯坦不曾侮蔑德國，但他身為學院的一名成員，應該就不公平的報道，替祖國辯護，這顯然是他的責任。這封信說："像閣下如此著名的人物，隻要能替德國說句好話，將會在國外產生極大的影響力。"
流亡海外的愛因斯坦知道，這樣爭論下去毫無用處。他的某些偉大的研究工作是在學院內完成的，要想打破漫長的二十年來所建立的關係，是相當困難的一件事。愛因斯坦突然覺得自己十分衰老而且泄氣，於是他提筆向以前的同事們寫了一封告別信。
他說："要我說出這種"好話"，無異是要我否認我終生所奮鬥追求的公正與自由。這樣的證詞對德國人民來說，不會是"好話"；相反，這樣的聲明隻會破壞德國人民在文明世界建立榮譽地位所必備的思想與原則。閣下的來信使我再次覺得，我辭去學院職位的決定是正確的。"
雖然愛因斯坦曾公開批評蘇聯，但現在卻被視為一名共產黨員，他被指控在卡普斯的避暑小屋中貯存了許多武器供共產黨叛軍使用。納粹警察闖入那棟漂亮的小屋去搜索彈藥及武器，經過徹底的搜查，隻找出家具及科學書籍。但愛因斯坦花費不少積蓄所建造的這間小屋以及他在柏林銀行的存款，全部被沒收。德國政府通知他說，他的財產已被沒收，因為這些財產很顯然將被用來資助共產黨發動革命。
就在這段恐怖氣氛日益濃厚的時間內，有人在柏林國家歌劇院門前焚燒了一大堆的書籍，放火的並不是無知的暴民，而是身穿製服、紀律嚴明的納粹黨人。海涅的歌曲很久以來一直受到德國人的喜愛及詠唱，但現在他的歌曲卻被焚燒，因為作者是猶太人。像傑克·倫敦及海倫·凱勒這些美國作家的作品也被付之一炬，因為傑克·倫敦除了撰寫冒險小說之外，還撰文為社會主義辯護；海倫·凱勒則被指為和平主義者。愛因斯坦有關"相對論"的論文也被投入烈火中，使火勢更為猛烈。
但是即使是在納粹德國，要想消除愛因斯坦的影響力也是不可能的。新帝國的一些膽怯的教授，在上物理學時，不敢提到愛因斯坦的名字，這樣才會比較安全。但在討論時要想不提及"相對論"，幾乎是不可能的，這些學者經常弄得左右為難。他們不知道要如何將他們納粹主子的政治思想和他們自己的科學思想明確地分開！
猶太科學家統統被趕出德國大學，即使沒有人能夠指出他們曾發表不忠的言論，仍然要被逐出校門。不同意粹納做法的非猶太人，也很快受到了迫害。普朗克曾利用他的影響力庇護許多不受納粹喜愛的科學家。他一直希望，納粹的怒潮將會平息下來，而使這些曾以他們的科學成就為德國帶來許多榮耀的科學家不再受到傷害。但是，迫害的情況卻一天比一天嚴重。
普朗克曾晉見希特勒，但那位瘋子拒絕聆聽他為同事們所提出的請求。顯然，德國的任何人都必須同意納粹迫害猶太人。
起初，愛因斯坦的某些朋友認為，這場暴風雨很快就會過去，教授將可安全回到祖國。但很快，即使是這些樂觀的人士也不得不承認，德國已變成一座瘋人院，在這所瘋人院裏，除了管理員之外，任何人都沒有安全感。當年愛因斯坦由於對德意誌共和國的忠誠，而恢複取得德國公民權，這是他的一項錯誤。如果他繼續保持瑞士公民權，以外國人的身分，或許可以保住那些被納粹政府所沒收的財產。
"我們不會為了被搶去的那棟可愛的屋子及存款而憂慮，"艾莎勇敢地說，"我們應該感謝我們的女兒和她們的丈夫已經安全逃出德國，比利時政府將會盡力保護我們的。"
但是，不斷地有謠言困擾著他們安寧的流亡生活，並使她越來越感到焦慮。據傳抵科克奎的一項報道說，一個納粹組織已經提供五千美元的獎金，征求刺殺這位最傑出科學家的人。
"我還不知道這顆腦袋竟值那麼多錢！"愛因斯坦摸著自己的頭，不禁哈哈大笑。
但艾莎可笑不出來。她知道，納粹德國的秘密特工人員在歐洲每一個國家都很活躍。幸好，比利時政府及王室答應保護他們，才使她放鬆心情。