高山寺在城內東山(東山又名高山),原名法華寺,始建於中唐,因寺廟規模大,臨夜擊鼓鳴鐘,聲響全城,故名“山寺晚鐘”,為永州八景之一,是柳宗元謫永期間第二住處。
宋名萬壽寺,明萬曆初年毀於火,萬曆四十一年重建,乾隆盡廢,道光八年又改建於東山之北。建國後為零陵軍分區幹校校址,佛像全毀。現僅存“大雄寶殿”及武廟各一座。武廟的四根青石柱,浮雕石龍,栩栩如生,寺外松竹掩映,因地勢至高,可一覽全城。