伊爾莎很懷疑愛因斯坦可能是想有一種三角式的家庭生活（今天的人則時尚地稱為3P），他可以因此同時享有愛爾莎的烹飪和社會關係，以及和伊爾莎的性關係。伊爾莎說，愛因斯坦還告訴她，如果她不想為他生小孩的話，那麼她不嫁給他會更好些。“我也的確沒有這種願望。”她聲稱。
此外，伊爾莎還覺得：“經過這麼多年的努力，我的母親才剛剛接近自己的目標。如果我在這個節骨眼上和她競爭，我實在不知道這樣做是否公平。也許您會覺得奇怪，我這個20來歲的傻丫頭居然要做出如此嚴肅的決定。我自己也覺得難以置信。這使我感到非常難過。幫助我！”
好在她並不需要別人幫助。愛因斯坦權衡再三，最後還是決定娶了母親，而放了女兒。
他倆有關係嗎？
當時還有一個原因是，伊爾莎比較愛慕虛榮，不夠樸實，愛因斯坦對她是有一些保留意見的。
雖然結果如此，但最初愛因斯坦畢竟喜歡過漂亮姑娘伊爾莎，甚至到了決定是否娶她的地步；畢竟伊爾莎也並不是對他一點不動心，並沒有堅決拒絕嫁給他；而且，他們畢竟曾長時間生活在一片屋簷下，“抬頭不見低頭見”，按照他激動、熱烈的情感，再說他也承認，與伊爾莎在一起時“他很難控製自己的性欲”，並親口向她示愛——那麼，他有沒有和伊爾莎發生過身體關係，有沒有“老牛吃嫩草”，而成為伊爾莎生命中的第一個男人呢？
至少，熱切、深情的對話，火熱的摟抱、親吻、愛撫……這些總是有的吧？
對這個問題，現在已經找不到確鑿史料了，包括愛因斯坦、伊爾莎、愛爾莎，當事人都沒有說明，所以我們也無從知曉，不敢妄說。
但是，我們完全可以這樣猜測一下。而且，這個可能性也並不是完全沒有。
直到4年後，即1923年，25歲的伊爾莎·愛因斯坦才終於嫁給了荷蘭人魯道夫。
1934年5月中旬，愛爾莎已陪著丈夫愛因斯坦在大洋彼岸安頓下來1年多了，而留在歐洲大陸的大女兒伊爾莎則患上了癌症。愛爾莎懷著一顆悲傷的心，再次飄洋過海回去看望正在絕症之中痛苦掙紮的伊爾莎。盡管愛爾莎求他，愛因斯坦還是決定不和她一起去。一則工作繁忙，抽不開身；二則非常危險，德國法西斯分子到處布置有人，企圖暗殺他。
伊爾莎已經病得很重，由她的妹妹瑪戈特照顧。據愛爾莎的另一女婿、瑪戈特的丈夫馬裏安奧夫說，伊爾莎認為她的病是身心失調引起的，因此她寧願接受心理分析而不是正規的治療。伊爾莎在8月份病故，她的骨灰埋在荷蘭她丈夫居住的地方。
愛爾莎從歐洲回來後因過度悲傷而病倒，在家休養了好幾個月才恢複社交生活，2年後自己也在異國他鄉病逝。
愛爾莎的小女兒瑪戈特則來到了美國，與母親、繼父愛因斯坦一起生活，並成為愛教授的養女，陪伴、照料他終生。