五岳殿是江南唯一同時(shí)供奉五岳圣帝的寺廟。是唐朝著名的石頭和尚的弟子“丹霞禪師”天然和尚所建，故名丹霞寺，始建于唐代貞元年間（785-804年）。清末，寺僧玉潔塑了五岳圣帝神像于前殿，以便吸引更多的朝圣者，從此丹霞寺改名為五岳殿。
五岳殿于民國(guó)24年（1935年）由該寺住持醒悟重建，有山門(mén)、正殿、后殿三進(jìn)，石墻鐵瓦，古樸莊重。山門(mén)建于登山路旁，花崗石的門(mén)額上刻著“五岳殿”三個(gè)大字，殿門(mén)下還留著“丹霞寺”。山門(mén)內(nèi)石柱上刻著一副楹聯(lián)：經(jīng)過(guò)都是有緣客；歸去何須看別山。此聯(lián)是湘潭人黃篤杰題于1922年。五岳殿石柱上刻有一副對(duì)聯(lián)：五圣歸來(lái)湘水北；岳神高駐楚天南。聯(lián)作者不詳，聯(lián)意是：五岳殿供奉的是東、南、西、北、中五岳之神，五方又以五行相配，故又以木、火、金、水、土五圣相稱；五岳殿其位置在衡山一段位于湘水以北，岳神即南岳圣帝高居古楚國(guó)以南的衡山祝融峰上。殿內(nèi)供奉著五岳圣帝神像，即東岳齊天仁圣帝、南岳司天昭圣帝、西岳金天順圣帝、北岳安天玄圣帝和中岳中天崇圣帝。后殿門(mén)額上刻著“七一遺址”，兩邊有“或?qū)嵒蛉督允墙?；一瞻一禮總歸真”兩行小字，為醒悟所題。關(guān)于“七一遺址”還有一個(gè)典故：說(shuō)的是唐代貞元初年，襄陽(yáng)有一個(gè)叫龐蘊(yùn)的居士來(lái)南岳拜會(huì)天然和尚，兩人默然相對(duì)。龐居士用樹(shù)枝在地上畫(huà)了個(gè)七字，天然和尚看了后，只在“七”字下寫(xiě)了個(gè)“一”字作答。龐居士頓時(shí)省悟，知道是叫他“見(jiàn)一忘七”，就同天然和尚結(jié)成好友。后人便將此地叫做“七一遺址”，并把這故事刻在正殿的花崗石門(mén)額上，留傳至今。
關(guān)于天然和尚出家之事還有一個(gè)神奇的故事：據(jù)《稽古錄》、《指月錄》記載：天然和尚本是鄭州一個(gè)儒生，熟讀孔孟之書(shū)。唐德宗貞元年間，他在赴京趕考應(yīng)試途中的一個(gè)旅館里遇到了一個(gè)很健談的和尚。兩人一見(jiàn)面就談得很火熱，談著談著，和尚突然探問(wèn)天然：“你這么風(fēng)塵仆仆要到哪里去？”天然洋洋得意地說(shuō)是到長(zhǎng)安應(yīng)試選官。和尚便勸他說(shuō)：“你選官不如選佛”。他覺(jué)得很有道理，于是不去京師應(yīng)考。在和尚的指點(diǎn)下，他便改道直奔江西去投靠馬祖道一。儒生到江西時(shí)，道一正在給僧徒們說(shuō)法。忽然進(jìn)來(lái)一個(gè)神態(tài)傲慢、舉止灑脫的儒生直趨說(shuō)法臺(tái)前。道一問(wèn)他來(lái)寺院做什么？他兩手托著頭發(fā)，做了個(gè)要求落發(fā)的動(dòng)作。道一端詳了他一會(huì)兒后說(shuō)道，南岳的石頭希遷才有資格做你的師傅。儒生于是馬上跑到南岳南臺(tái)寺找石頭希遷法師收他為徒，要求落發(fā)。希遷見(jiàn)他那種傲慢態(tài)度，就說(shuō)暫不落發(fā)，以后再看機(jī)緣。石頭和尚收留他干了三年的雜事。一天，石頭和尚吩咐眾僧把佛殿前的雜草鋤掉，儒生認(rèn)為機(jī)緣已到，是石頭暗示他可以落發(fā)了，于是便把頭發(fā)洗得干干凈凈，跪在堂前請(qǐng)求石頭和尚給他剃度。石頭和尚見(jiàn)此情況，笑著給他落發(fā)說(shuō)戒，但沒(méi)給他賜法號(hào)，叫他再去拜謁馬祖道一。儒生聽(tīng)了之后，便再次去江西找馬祖。沒(méi)想到到了寺院，看守山門(mén)的和尚卻不準(zhǔn)他進(jìn)去見(jiàn)馬祖，他十分氣憤，便把和尚打翻在地，并騎在和尚的身上，此事驚動(dòng)了馬祖道一。馬祖道一出門(mén)一看，原來(lái)是三年前要求落發(fā)的儒生，馬祖便大喝一聲：“吾子天然，休得無(wú)禮！”他一聽(tīng)，連忙站起來(lái)，轉(zhuǎn)身跪在馬祖面前說(shuō)道：“謝謝大師恩賜法號(hào)”。于是，他就取名天然和尚了。自此以后，天然和尚開(kāi)始云游四方。他在天臺(tái)山華頂峰住了三年，后來(lái)去了不少地方，最后他到慧林寺去游覽時(shí)，正逢天下大雪，天然和尚競(jìng)把殿上的木佛搬下燒火取 暖。有人說(shuō)“造孽了”，他卻說(shuō)：“我就是佛，木頭怎能成佛？該燒該燒！”燒了木佛出來(lái)，天然獨(dú)自來(lái)到洛陽(yáng)天津橋頭，見(jiàn)鄭守備驅(qū)車迎面而來(lái)，便幾步躥到橋上，橫身躺在橋上。鄭守備厲聲斥問(wèn)：“是誰(shuí)為何躺地?cái)r車？”天然答道：“天然閑來(lái)無(wú)事，逗守備玩耍，守備為何如此盛氣凌人？”鄭守備早就知道天然和尚名聲，還聽(tīng)說(shuō)誰(shuí)也惹不起他，于是下車將天然扶起上車，直往守備衙門(mén)，并送了他一份厚禮。元和十五年（820年），他把在洛陽(yáng)弄到的錢(qián)帶到南陽(yáng)丹霞山，結(jié)庵收徒，廣收法徒達(dá)三百人，因而被稱為丹霞禪師。
他在丹霞山居住了一段時(shí)間后，覺(jué)得還是南岳好，便在德宗貞元年間，再次來(lái)到南岳，在如今這個(gè)地方建寺，取名丹霞寺。在丹霞寺住了一段時(shí)間后，他發(fā)現(xiàn)湘南寺左邊有大悲洞、卓爾巖，右邊有文殊洞和隱松巖，是自然界的奇絕勝處。于是他又來(lái)到了湘南寺，在這里自由自在地度過(guò)了幾年。最后他來(lái)到了環(huán)境幽雅的水月寺，在此住了一些年月，于83歲時(shí)圓寂于此。水月寺側(cè)，至今墓塔尚在。