西漢末年，秦豐率一支義軍與光武帝爭奪天下，在蘇嶺山附近建寨抗據，光武剪除他之後，巡遊襄陽，與習鬱一同夢見蘇嶺山神，便命建立神祠，立二石鹿於神道，此後便改稱鹿門山，神祠便改稱鹿門寺。
鹿門寺藏在幽林深處，寺後有巨巖，巖上有清泉，泉水從巖上飄灑而下，如夏日急雨，其聲亦如暴雨，其下積水成池，故名暴雨池。掬而飲之，五內俱涼。而冬季嫋嫋有熱汽升騰，飲之溫潤。寺後林中，有石徑蜿蜒，可以登臨極頂，俯瞰漢水遠來，繞山麓而南入白雲無盡處，其間城郭人家、沙渚煙樹，宛如畫冊。從南麓下山，至漢水邊乘船溯江而上，經鳳林山、習家池、峴山，可達襄陽城，再上行，可達隆中。
當年孟浩然隱居時，就是循着這條水道往返于山林城郭之間，訪問僧朋詩友。他的許多詩句可以在這裏找到對應的實景實物。
