豸山位于縣城沱江鎮(zhèn)東面，屹立于瀟水之畔，“峭壁摹空，懸崖俯流?！币蛏叫嗡乒糯鷤髡f中的獨(dú)角獸(豸獬)而得名。
沱江鎮(zhèn)作為江華的縣城已有近550年的歷史，豸山這一風(fēng)水寶地也就成了豸山寺建于明朝萬歷四年(1576)距今四百余年。豸山寺有兩個(gè)獨(dú)特的地方，一是佛、道、儒三教合一的建筑格局。古代這一片建筑依次是佛教的豸山寺觀音閣、道教的呂祖閣、儒教的文昌閣，一字排開，連為一體?，F(xiàn)在我們看到的是1984年縣城從水口鎮(zhèn)回遷沱江鎮(zhèn)之后重建的格局。左邊是豸山寺，右邊是望江樓，還有前面建于民國年間的代表俗文化的六角涼亭——望江亭，為古今義渡小憩之所。呂祖閣與文昌閣毀于歷代兵火，早已不復(fù)存在。