安祿山本營州柳城胡種，姓康氏。其母阿史德為丕居突厥，禱子於軋犖山。及產，有光照穹廬，鳥獸皆鳴。母以神人所命，遂家於軋葷山。其後父死，隨母改嫁虜將安延偃，故更名安祿山。幼性蹇驕，習俗暴黠，誌存攻伐，日事射獵。能臆度人，通六國番語。身體肥大，腹垂過膝，能為胡旋之舞，步走如飛。自開元中從張守珪討奚契丹敗績，守珪奏請斬之，祿山臨刑，呼曰：“大夫欲滅奚契丹，奈何便殺祿山？”
乃更執送京師，宰相張九齡批曰：“昔穰苴誅莊賈、孫武斬宮嬪，守珪軍令若行，祿山不宜免死。”帝惜其才，意欲赦之，九齡固爭曰：“失律喪師，不可不誅；且其貌有反相，不殺必為後患。”史官有詩雲：
知己知人真傑士，先明預曉得心丹。
九齡相輔爭天下，曾向長安識祿山。
帝曰：“卿勿以晉王夷甫識石勒枉害忠良，若斬此人，非安唐之計也。”帝再三以言論之，九齡指祿山曰：“汝可盡忠報主，勿生異心，若有異心，早晚必取汝頭！”祿山喏喏連聲而退。
卻說祿山自能巧言令色，阿附人意，人多譽之，由是帝益以為賢，累遷節度之職，輒建大功。至是又入朝麵君，帝賜黃金百斤，蜀錦千匹，自後寵待尤厚，謁見無時。忽一日，祿山奏言：“矗去被營州蟲食田苗，臣焚香祝天，稱言‘臣若操心不正．事君不忠，願使蟲食臣心；若不負神祗，願使蟲散無影’。
祝罷不過二日，即有群鳥從北飛來，食蟲立盡。”帝聞奏，深信其忠，遂得出入宮掖。帝指其腹問曰：“此胡腹中何所有？”
祿山答曰：“有赤心耳。”一日，宣召入禁，帝與貴妃並坐，祿山先拜貴妃，帝怪而問之，祿山曰：“胡人先母而後父，安敢失禮？”帝不知祿山有顧慕貴妃之意，被其瞞過，益加寵愛。
貴妃在後宮，見祿山之來，亦以目送情，乞祿山為養子，因是出入無禁。時帝春秋鼎盛，色欲浸衰，而祿山年富力強，肢體充實，貴妃遂與之私通，情好日密，嚐與貴妃對食，或通宵不出，頗有醜聲著聞於外，帝亦不疑也。或時帝與貴妃共坐，祿山侍側，帝戲指貴妃乳曰：“軟溫新剝雞頭肉。”祿山對曰：
“滑膩初凝塞上酥。”貴妃笑曰：“堪笑胡兒隻是酥。”帝亦為之大笑。祿山當自稱三百斤，貴妃以錦繡為大繈褓，裹祿山於內，使官人以彩輿舁之。帝聞後宮喧笑，問其故，左右以“貴妃三朝洗祿山兒”對，帝自往觀之，大悅，賜貴妃“洗兒金錢”，時有詩以誚之雲：
禁宮花發豔陽天，碧眼胡奴日醉眠。
不識青巾為世玷，臨朝慨賜洗兒錢。
是時，貴妃之兄楊國忠為相，碌碌無所建明，素與祿山不合，仇怨愈深，數言祿山欲反。帝不聽，反擢祿山為平盧、範陽、河東三道節度使，錫爵郡王，兼河北采訪處置使。祿山既兼領三鎮，日益驕恣，自以曩時不拜太子，見帝春秋高邁，頗有內懼；又見武備墮弛，有輕中國之心，以帝待之甚厚，欲俟帝晏駕，然後作亂。正值楊國忠屢言祿山且反，帝又不聽，國忠遂以事激之，欲其速反，以取信於帝，至是祿山決意遂反。其部下驍勇戰士八千餘人，一可當百，周尚莊、孫孝哲為腹心，史思明、安守忠、李歸仁、蔡希德、牛延玠、向潤容、李廷望、崔乾祐、尹子奇、何千年、武令珣、能元浩、田承嗣、田口真、阿史、那承慶為爪牙。