盛允本意也隻是逗一逗黃琬，但沒想到黃琬因此捧手回答道：“蠻夷亂華夏，責任都在司空。”說完就拂袖而去，盛允因此大感驚奇。
黃琬後來逐漸升遷到五官中郎將，得到光祿勳陳蕃的敬待。舊製，光祿署舉薦三署郎，要以高功，任久，才、德優異者為茂才四科，但當時權貴富豪子弟大多以人情而被舉薦為郎，而貧困守節之人卻被遺棄。京都洛陽特地為這個現象做了諺語說：“欲得不能，光祿茂才。”於是黃琬和陳蕃二人同心協力，共同選舉賢才。
平原的劉醇、河東的朱山、蜀郡的殷參等人都以才德品行得舉。但此舉卻侵害了權貴富豪子弟郎官的利益，於是他們聯合中傷陳蕃、黃琬，二人的案件交由禦史中丞王暢及侍禦史刁韙處理。王暢及刁韙素來敬重陳蕃和黃琬，就不糾舉此事，但左右的人因此誣陷黃琬、王暢等為朋黨。王暢因父親王龔的關係隻被降職為議郎，而陳蕃被免職，黃琬及刁韙則遭禁錮。
黃琬遭禁錮將近二十年。一直到靈帝光和末年，太尉楊賜舉薦黃琬有治亂之才，因此朝廷征召其為議郎，又受任青州刺史，遷任侍中。中平初年，出任右扶風，入朝為將作大匠、少府、太仆等官。後朝廷恢複州牧製度，以黃琬為豫州牧，當時盜賊猖獗，州境凋殘，黃琬進擊平定盜賊，威名大震。在任政績為天下表率，因此被賜爵關內侯。
後來董卓秉政，因為黃琬是名臣，征召他入朝為司徒，不久遷太尉，進封陽泉鄉侯。董卓商議遷都長安，黃琬與司徒楊彪共同勸諫董卓未成功。退朝後駁議說：“從前周公營建洛邑使姬氏安定，光武帝占卜東都以興隆漢室，這是上天的啟發，神明之所以安定的事情。大業即以安定，怎麼能隨便有所遷動，而虧失四海之望呢?”
當時人害怕董卓暴怒之下，黃琬會被害，力諫他不要這麼做。黃琬回答道：“從前白公勝作亂於楚國，屈廬迎刃向前；崔杼弑君於齊國，晏嬰不怕死而不與之盟。我雖然無德但確實仰慕古人之節。”黃琬後來還是因此獲罪免官。董卓仍然看重其名德舊族，不敢加害。後與楊彪同拜光祿大夫，直到關羽與司徒王允同謀誅殺董卓。黃琬再次被漢獻帝啟用，再次出任司徒之職，黃琬的仕途可謂是起起落落，不過這次他再次站了起來，作為舊臣黃琬在朝中的影響力還是相當了得的............
還有右中郎將、西鄉侯朱儁、國舅董承、太傅司馬僤、太常卿種拂、太仆魯馗、大鴻臚周奐、城門校尉崔烈、越騎校尉王頎這些人都是朝廷的忠義之士，而且種坲、魯馗、周奐等人皆是九卿，能量了得，所以得到了這些的一致擁護的話要對付楊懿以及那個白馬寺的主持摩登大法師甚至他們背後的楊彪都容易的多了，朝中有大臣幫著說話，自己又掌握兵權，關羽相信他一定會成功達到目的的，這一次他要在政治領域來個大的整治，徹底整頓一下洛陽的風氣，除此之外還要將一批不法之人繩之以法。
關羽打定了主意之後決定親赴白馬寺走訪一下探探虛實，掌握第一手的資料為之後的動作做一下調查走訪，河南尹的事隻能暫且擱下了，關羽這筆賬遲早要算的，不過現在的他最緊要的是察看一下白馬寺的問題，俗話說：“紙上得來終覺淺，絕知此事要躬行”，這說的就是理論與實踐的關係，但放在這種大是大非麵前同樣適用，兼聽則明偏聽則暗，他不能隻聽陳宮一麵之詞就妄下定奪，此事事關重大必須親自造訪一下白馬寺。
關羽在周倉和小姑娘的陪同下馬不停蹄的離開了雒陽直奔白馬寺而去，白馬寺位於河南洛陽城東12公裏處，是佛教傳入中國後第一所官辦寺院。它建於東漢明帝永平11年(公元68年)，東漢永平七年，漢明帝劉莊因夜夢金人，遣使西域拜求佛法。公元六十七年，漢使及印度二高僧迦葉摩騰、竺法蘭以白馬馱載佛經、佛像抵洛，漢明帝躬親迎奉。
公元六十八年，漢明帝敕令在洛陽雍門外建僧院，為銘記白馬馱經之功，故名該僧院為白馬寺。 白馬寺座北麵南，總麵積二百餘畝，其主體建築有：天王殿、大佛殿、大雄殿[2]、接引殿、毗盧閣五層殿堂及第一釋迦舍利塔。
相傳漢明帝劉莊夜寢南宮，夢金神頭放白光，飛繞殿庭。次日得知夢為佛，遂遣使臣蔡愔、秦景等前往西域拜求佛法。蔡、秦等人在月氏（今阿富汗一帶）遇上了在該地遊化宣教的天竺（古印度）高僧迦什摩騰、竺法蘭。蔡、秦等於是邀請佛僧到中國宣講佛法，並用白馬馱載佛經、佛像，跋山涉水，於永平十年（67）來到京城洛陽。漢明帝敕令仿天竺式樣修建寺院。為銘記白馬馱經之功，遂將寺院取名“白馬寺”。白馬寺為長方院落，坐北朝南，寺內主要建築有天王殿、大佛殿、大雄殿、接引殿、毗盧閣、齊雲塔等。