紅石峽，位居榆林城北五公裏處，原有宋元名刹紅山寺，有上千年的曆史。賈誌：“在榆林衛北十裏紅石峽舊傳李繼遷葬其祖彝昌，障水別流而鑿石為穴，以葬及葬畢仍引流水於古道，今俗傳墓在水中石穴”（見《榆林府誌》卷八）。為紅石峽較早原始記載。因山石赤紅故名。明萬曆二十一年（1593），延綏鎮巡撫鄭汝璧改紅石峽為雄石峽，此後紅山寺亦稱雄山寺，後又稱鎮遠寺。秦為榆林關，漢設榆溪塞，明為九邊重鎮，“天下之勢在九邊，而秦有其三；三邊之勁甲天下，而榆林居其首”（《榆林府誌》卷四十三）。故自秦漢以來曆代都被視為軍事要地。
曆史上關於紅石峽的記載和讚美文句甚多，如《榆林府誌》（卷八）記載：“‘紅山兩峽字’，在府城北十裏，兩峽石匾字跡莫紀年代，峭壁不可摩抄，一望儼如圖畫，真巨觀也。西峽有雄鎮三秦、中外一統、禹跡摩崖、華夷天塹、瀚海蓬萊、天邊鎖鑰、中華天柱、岩壑金湯、安內攘外、列屏雲塞、俯仰神怡等，其本朝有款式可見者則天成雄秀為榆林守長德明題。東峽有空中樓閣、長榆藩翰、錦繡山河、雄流製勝、慈雲遍覆等字，其本朝有款式可見者則天開圖畫為榆林鎮中原韓應琦題，地樓秦封為榆林鎮長韋陀保重修，又東峽上佛寺中有明成化年總兵陳輝求嗣碑，其餘名人題詠鐫刻石壁及碑記琳琅滿目，不可勝紀。”再如“榆林會府北去十裏許，有宋元間名刹遺址，在即今紅石峽北，謂之紅山寺是也。其山望之蔚然，其起如鶩，其伏如踞，其支而出也，如趨如附，逶迤而南，乃為衛治。山下有河，其源出自境外葫蘆海子，水流悠悠晶晶，環繞而下入黃河以達於海，山水秀麗為榆林寨第一勝景。寺南未幾三百步，古有小石佛殿，規模狹隘，未足以聳觀瞻，居人惜之”（明·成化年間《創建石佛殿記》）。“距榆林城北幾十裏許，有山名曰紅石峽，其土壤夷曠介乎□田虜境交界，山明而水清，地幽而境勝，其左弗及一裏寺名紅山”（明·成化年間《創建石佛殿記》）。“城之北有雄石峽，為榆鎮之勝地也，有山有水有墩台”（明·正德年間《碑記》）。“環榆皆黃沙，去城北七裏許，忽有石兩山夾水，層巒峭壁，鑿室建刹，名曰雄山寺，古洞層回，奉佛殿神百千於其內，宛若十洲三島之勝，慨往營締造”（清·康熙年間《金妝地藏十王碑記》）。“城北七裏許者雄石峽，石崖壁立，清流瀑出，塞內外之險是邊疆之□比也。我定鼎泯一區，宇中外一統之盛，亙古未有。然交易定所，往來有常期，南人不得北出，北兵不得入南，南北之分森嚴，此益以防人心也。正封□也。素有園覺殿一百年久，兩地雖曰一隅，倘耳共一廟，不僅古刹住之鳥有邊疆必至關□”（清·康熙年間《重修園覺殿碑記》）。“水聲震地……”（清·康熙年間《創修園覺堂記》）“……七裏許，中藏一峽，名曰雄石，其峽兩山峙立，一水飛流……若渠、若樓、若閣、若神，天成人工，兩擅其美”（清·康熙年間《題名》）。
紅石峽分為南峽、北峽，以石壩為界，以北即北峽，以南為南峽。北峽亦曾有摩崖石刻，因築壩取石而慘遭破壞，今已蕩然無存。南峽也經曆了自然分化、“文化大革命”破壞，現狀不容樂觀。