然而，三年之後，載貝子把事情鬧得更大了。這事跟一個叫段芝貴的人有關(此人是北洋的舊人，是袁世凱從李鴻章手裏繼承下來的舊將，跟段祺瑞也關係密切，人稱段祺瑞為老段，段芝貴為小段。袁世凱稱帝，他擁戴甚力)。此時的段芝貴，正處在上升時期，做過鎮統製(師長)兼管天津警察事務，一直都想高升一步，過一過封疆大吏的癮。而他的主公袁世凱，也樂於讓部下升上去。機會來了，載振奉命到東三省公幹，從天津乘船出發，逗留多日，段芝貴得以盡地主之誼，當然少不了名妓美女侑酒。當時津門有位女藝人楊翠喜，是京津兩地盡人皆知的女伶，長得美，戲也演得好。14歲登台演出，當時中國坤伶很少，所以一下就紅了，據說曾經深得李叔同的賞識和愛憐。席上，楊翠喜大展身手，載貝子著了迷。段芝貴趁熱打鐵，高價買下楊翠喜，送給載貝子。不久，東三省改設督撫，段芝貴被破格提升為署理黑龍江巡撫(代理)。
很快，事情為奕匡、載振父子的政敵偵知，禦史趙啟霖一封彈章上去，載貝子又有麻煩了。在朝廷派人調查之前，段芝貴在天津警察裏的好友楊以德，馬上安排了一位鹽商王益孫，也是楊翠喜的舊交，出麵頂缸，神不知鬼不覺，楊翠喜回到了天津，所有的買賣手續一律重辦。買楊翠喜時的銀子，原本大半都是王鹽商出的，現在順勢把人接回來，倒也順理成章。
載貝子什麼事也沒有了。禦史趙啟霖反倒丟了官。可是，即使把事抹平，人言卻抹不平，輿論反了天。段芝貴的封疆大吏隻好暫時不做了，而載貝子賠了美人，官也折了。好在慶親王奕匡聖眷猶在，地位仍在，因此，潑天的富貴也在。幾年後，滿人親貴全麵當家，大舉收權，載貝子又重新出山。但此時滿人的江山已經到了頭，載貝子隻好到天津租界做寓公去了。
當權貴最大的愛好隻剩下貨與色，可靠固然還可靠，但江山卻已動搖。