李白的祖先，如漢飛將軍李廣、涼武昭王等，可說都有一種武勇急暴的特性，這種特性在李白的血液裏也湧動著，又加上西域特殊的勇武好鬥的環境影響，造就了李白一種任俠的特質，而他的旨趣，也就傾向於遊俠方麵了。此外，這與蜀地傳統的區域文化也有重要聯係。李白喜縱橫、好遊俠的特殊行為方式深受蜀地傳統的士風民俗熏染。
古代的士人對劍是情有獨鍾的，不僅僅是為了防身之用，而且是一種昂揚向上的精神的象征、正義的象征。李白從小喜愛劍術，除學習文化知識外，還經常學習劍術，隨著年齡的增長和閱曆的增加，他對那些除暴安民的遊俠更加推崇起來。他非常喜愛荊軻、專諸、聶政，甚至張良等刺客，還有鑄劍的幹將、莫邪等，他們為弘揚社會正義，或以鑄奇劍鏟除暴君為目的，或刺殺君主或權貴，氣貫長虹，可歌可泣，實在是天下最可愛的人之一。
李白練習劍術，首先要得到一柄好劍。這對於李白來說可是為難的事情。李白的父親是不讚成李白學習劍術的，他為了兒子的將來，希望兒子或是經商謀生，或是走仕途之路，絕不願意兒子做一介遊俠，終日無所事事地在街市上閑逛。因此，李白的父親不肯出錢為李白買劍。李白知道父親的執拗，就不想找父親要錢，而是自己準備鑄劍，像古代的幹將、莫邪一樣。
一天，李白的父親看到他在磨一根又長又粗的鐵棒，手上都磨出了很多血泡，但他還是不停地磨，李白的父親很好奇，就走過去問：
“兒子，你這是在幹什麼？”
“我想自己造一柄長劍！”李白回答說。
“你想學那磨針的老婦人嗎？”父親問。
“是的。”李白誠實地回答。
“可是，你知道這樣做的後果嗎？”李白的父親說，“那就是你一輩子也造不出一柄劍。你看鐵匠鋪裏造劍是用你這種方式嗎？”
“不是。”李白說，“他們是用火將鐵熔化成水，然後將鐵水放到鑄劍的模子裏，冷卻後就成了劍坯，然後打磨一下就可以了。”
“你既然知道，為什麼還是那麼固執呢？”父親不解地問。
“我這也不失為鑄劍的一種方式啊，雖然笨拙了些，時間長久了些，但終有一天能夠鑄成一柄長劍的。”
父親說：“我給你錢去買把劍吧！”
李白固執地說：“我想自己造一柄劍，自己親手磨製出來的劍，感情深厚些，使用起來得心應手，不生疏。劍也是通人性的。”
李白的父親無可奈何地搖搖頭。過了一會兒他說：“兒子，既然你那麼喜歡練劍，我把家裏祖傳的一本劍譜交給你保管吧，這可是祖傳的，據說是飛將軍李廣練劍時的心得體會，好好練習吧，你會成為一名劍客。”
李白十五歲起就開始練習劍術，他聞雞起舞，因此學得一身好劍術。在《與韓荊州書》中說：“十五好劍術，遍幹諸侯。”李白一生愛劍，常將劍攜帶身邊，往往乘醉舞劍。他的友人崔宗之曾說李白“袖有匕首劍，懷中茂陵書”。其豪俠之氣概堪與古代的俠士越女、專諸、荊軻、劇孟等人相比，從他出劍之迅速，劍法之準確，可以推測他的劍術簡直修煉到出神入化的地步。
崇拜李白的詩人魏萬在為他所編撰的《李翰林集》作序時寫道：“白……少任俠，手刃數人”，說他曾經用刀劍殺過作惡多端之徒。無論“手刃數人”是確有其事還是文學的誇張，他以劍來弘揚正義精神是事實。劍從來就是正義的象征，如屈原在寫歌頌少司命的詩中有“竦長劍兮擁幼艾，蓀獨宜兮為民正”，少司命就是仗著長劍嗬護幼童百姓的。古人眼裏，劍代表了正義與公理。由於李白擁有高超的劍術，頗有英雄氣概，因此，在習劍術和仗劍走天下的過程中，也逐漸養成了遊俠的性格。