初，廣之從弟李蔡與廣俱事孝文帝。景帝時，蔡積功勞至二千石。孝武帝時，至代相。以元朔五年為輕車將軍，從大將軍擊右賢王，有功中率，封為樂安侯。元狩二年中，代公孫弘為丞相。蔡為人在下中，名聲出廣下甚遠，然廣不得爵邑，官不過九卿，而蔡為列侯，位至三公。諸廣之軍吏及士卒或取封侯。廣嚐與望氣王朔燕語，曰：“自漢擊匈奴而廣未嚐不在其中，而諸部校尉以下，才能不及中人，然以擊胡軍功取侯者數十人，而廣不為後人，然無尺寸之功以得封邑者，何也？豈吾相不當侯邪？且固命也？”朔曰：“將軍自念，豈嚐有所恨乎？”廣曰：“吾嚐為隴西守，羌嚐反，吾誘而降，降者八百餘人，吾詐而同日殺之。至今大恨獨此耳。”朔曰：“禍莫大於殺已降，此乃將軍所以不得侯者也。”
後二歲，大將軍、驃騎將軍大出擊匈奴，廣數自請行，天子以為老，弗許；良久乃許之，以為前將軍。是歲，元狩四年也。
廣既從大將軍青擊匈奴，既出塞，青捕虜知單於所居，乃自以精兵走之，而令廣並於右將軍軍，出東道。東道少回遠，而大軍行水草少，其勢不屯行。廣自請曰：“臣部為前將軍，今大將軍乃徙令臣出東道，且臣結發而與匈奴戰，今乃一得當單於，臣願居前，先死單於。”大將軍青亦陰受上誡，以為李廣老，數奇，毋令當單於，恐不得所欲。而是時公孫敖新失侯，為中將軍從大將軍，大將軍亦欲使敖與俱當單於，故徙前將軍廣。廣時知之，固自辭於大將軍。大將軍不聽，令長史封書與廣之莫府，曰：“急詣部，如書。”廣不謝大將軍而起行，意甚慍怒而就部，引兵與右將軍食其合軍出東道。軍亡導，或失道，後大將軍。大將軍與單於接戰，單於遁走，弗能得而還。南絕幕，遇前將軍、右將軍。廣已見大將軍，還入軍。大將軍使長史持?醪遺廣，因問廣、食其失道狀，青欲上書報天子軍曲折。廣未對，大將軍使長史急責廣之幕府對簿。廣曰：“諸校尉無罪，乃我自失道。吾今自上簿。”
至莫府，廣謂其麾下曰：“廣結發與匈奴大小七十餘戰，今幸從大將軍出接單於兵，而大將軍又徙廣部行回遠，而又迷失道，豈非天哉！且廣年六十餘矣，終不能複對刀筆之吏。”遂引刀自剄。廣軍士大夫一軍皆哭。百姓聞之，知與不知，無老壯皆為垂涕。而右將軍獨下吏，當死，贖為庶人。
廣子三人，日當戶、椒、敢，為郎。天子與韓嫣戲，嫣少不遜，當戶擊嫣，嫣走。於是天子以為勇。當戶早死，拜椒為代郡太守，皆先廣死。當戶有遺腹子名陵。廣死軍時，敢從驃騎將軍。廣死明年，李蔡以丞相坐侵孝景園?地，當下吏治，蔡亦自殺，不對獄，國除。李敢以校尉從驃騎將軍擊胡左賢王，力戰，奪左賢王鼓旗，斬首多，賜爵關內侯，食邑二百戶，代廣為郎中令。頃之，怨大將軍青之恨其父，乃擊傷大將軍，大將軍匿諱之。居無何，敢從上雍，至甘泉宮獵。驃騎將軍去病與青有親，射殺敢。去病時方貴幸，上諱雲鹿觸殺之。居歲餘，去病死。而敢有女為太子中人，愛幸，敢男禹有寵於太子，然好利，李氏陵遲衰微矣。
李陵既壯，選為建章監，監諸騎。善射，愛士卒。天子以為李氏世將，而使將八百騎。嚐深入匈奴二千餘裏，過居延視地形，無所見虜而還。拜為騎都尉，將丹陽楚人五千人，教射酒泉、張掖以屯衛胡。
數歲，天漢二年秋，貳師將軍李廣利將三萬騎擊匈奴右賢王於祁連天山，而使陵將其射士步兵五千人出居延北可千餘裏，欲以分匈奴兵，毋令專走貳師也。陵既至期還，而單於以兵八萬圍擊陵軍。陵軍五千人，兵矢既盡，士死者過半，而所殺傷匈奴亦萬餘人。且引且戰，連鬥八日，還未到居延百餘裏，匈奴遮狹絕道，陵食乏而救兵不到，虜急擊招降陵。陵曰：“無麵目報陛下。”遂降匈奴。其兵盡沒，餘亡散得歸漢者四百餘人。
單於既得陵，素聞其家聲，及戰又壯，乃以其女妻陵而貴之。漢聞，族陵母妻子。自是之後，李氏名敗，而隴西之士居門下者皆用為恥焉。
太史公曰：《傳》曰“其身正，不令而行；其身不正，雖令不從”。其李將軍之謂也？餘睹李將軍悛悛如鄙人，口不能道辭。及死之日，天下知與不知，皆為盡哀。彼其忠實心誠信於士大夫也！諺曰“桃李不言，下自成蹊”。此言雖小，可以喻大也。