然而，李蕙仙對於梁啟超的“眼力”和“成功”並不領情。她有自己的一套判斷標準。身為母親，為兒子挑媳婦，自然少不了以自己為標杆。林徽因的種種舉動，在李蕙仙看來，很不“大家閨秀”。她認為梁思成娶這麼個女孩，不會幸福。而且，李蕙仙也知道，自己的身體狀況不好，1922年，她曾從天津去菲律賓馬尼拉做過癌切除手術（當時李蕙仙的女婿在馬尼拉做總領事），雖說已經康複，但保不齊會不會複發，一旦她哪天仙去，監督控製不了媳婦，吃苦的還是自己兒子。她不能不多方考慮。而且，很可能，在舊觀念裏，梁思成是嫡長子，林徽因卻是庶出，在門第上，林家和梁家，也還是有些距離。
1924年，泰戈爾訪華，國內聲勢頗大。老詩人遍訪中國，留下許多相片，大小報紙少不了刊登。唯獨有一張，讓人一見難忘。畫麵可以分為兩部分，左邊是四位男士，右起三位，依次是，徐誌摩、林徽因、泰戈爾。老詩人泰戈爾剛好站在畫麵的黃金分割線上，是視覺的中心點，再加上他白發白須，就更加惹人注目。他的左手邊，是林徽因。她身材嬌小，亭亭玉立，戴著佛珠，雙手背後，飄逸自然。 畫麵的最右則是徐誌摩，他梳著分頭，兩腳岔開立著，兩手背後，嚴肅挺拔。泰戈爾曾在日壇演講，徐誌摩做他的翻譯，林徽因則攙扶他上台。當時有文章寫：“林小姐人豔如花，和老詩人挾臂而行，加上長袍白麵、郊荒島瘦的徐誌摩，有如蒼鬆竹梅的一幅三友圖。”
此等“美談”，少不了要傳到李蕙仙耳朵裏，她肯定會對林徽因有看法：尚未出嫁的大姑娘，拋頭露麵，已經不合禮法，再與人傳出一點不清不楚的“緋聞”，更是大逆不道。作為行得端做得正的傳統女性，李蕙仙從心裏抵觸林徽因，幾乎是慣性使然；作為梁思成的母親，李蕙仙可能也為長子思成不值——既然已經有意與思成促成一對，怎麼可以再與其他男人頻繁接觸？李蕙仙心頭的小火，悶悶地燒著。
梁啟超覺察到了不對。一方麵，徐誌摩對林徽因窮追猛打，另一方麵，李蕙仙對林徽因又很不滿意，而且，妻子對林徽因的態度，也影響到大女兒梁思順對林徽因的感情。她們母女倆統一戰線，堅決反對林徽因嫁入梁家。梁啟超無法，隻好趕緊送林徽因和梁思成出國留學。希望時間和空間，能夠衝淡一切。1924年，李蕙仙乳腺癌複發，身體越來越壞，但她從未放棄對兒子的婚事施加影響。1924年7月，林徽因、梁思成抵達康乃爾大學。梁思成常常收到李蕙仙的信使——大姐梁思順的來信。信中反複傳達一個中心思想：母親李蕙仙反感林徽因，堅決反對他們結婚。
李蕙仙的一票否決，令所有人苦惱萬分。她對這個家的貢獻，以及她在家中的地位，令所有人都不能無視她的言論，更何況，她現在又身患重病……梁啟超煩悶著，卻又無計可施，但他也隻能抱怨：“這是思成一生幸福的關鍵所在，我幾個月前就很怕思成因此出精神異動，毀掉了這孩子。”梁思成憂傷著，他喜歡林徽因，想跟她在一起，她是那麼聰慧、美麗。林徽因更感到委屈，她才二十歲，尚屬青少年，在家裏沒有發言權，而且，她覺得自己並沒有做錯什麼。她隻是努力去對一個愛自己的人好，她隻是努力想讓自己的人生變得更精彩……有何不可？又何罪之有？她當然有自己的道德準繩，但大方地去社交，對於一個女子來說，也應當是必須的。林徽因越想越悶，她病了。
然而，李蕙仙等不及了。1924年9月13日，一代賢妻李蕙仙女士，在和梁啟超先生共同生活了三十三年之後，因病去世，享年五十五歲。梁啟超悲傷不已。在《苦痛中的小玩意》中，他寫道：