相師山不僅生態環境優美絕倫，人文景觀也是歷史悠久、豐富多彩。青龍關、白虎關、系馬頭、白旗坳、黃旗坳、仙人橋、白云寺、文道屋、相師寺都有著深遠的歷史背景和優美的神話傳說。

　　青龍關在主峰山下，是岳陽縣和通城縣南北交界的一個關卡；白虎關是岳陽縣與通城縣東西交界的一個關口。兩個關卡都修建于明朝 萬歷年間，關內都刻有石碑記，可惜白虎關已被毀拆，只留斷壁殘墻，青龍關至今保護較好。

　　白旗坳、黃旗坳、系馬頭、仙人橋、白云寺等都和歷史人文緊密關聯。

　　相傳，相師山有一個美麗動人的傳說，很久很久以前，此山叫眉毛尖，山上植被豐富，生長著很多的奇花異草。有一年山下的醉仙洞（現在的季山村）發生了一場嚴重瘟疫，許多人危在旦夕，一天一個老人來到村子里說，眉毛尖山峰有一顆白果樹，樹下有一種叫“丹”的草，白果樹的花和丹草合藥能治好此病。這種花只在晚上子時開放，錯過時辰就摘不到了，必須要有一對新婚夫妻共同去采摘，男的摘花，女的采草。

　　村子里正好有一對新婚夫妻，男的叫毛阿寶，女的叫許阿秀，當晚他們就去了眉毛尖，按老人的要求阿寶摘花，阿秀采草。阿寶摘好了花交給阿秀，突然一陣大風吹來白果樹枝“嘣”的一聲折斷了，阿寶隨著樹枝向萬丈山崖掉了下去，黑夜中只見一道亮光從天而降，托起阿寶及其手上的樹枝往東方黃袍山而去。阿秀非常傷心，可她心想救村子里的人要緊，就趕緊把花和草都帶回村里，配藥熬湯，終于把鄉親們的病都治好了。

　　可阿秀心里惦念丈夫，就一人來到眉毛尖遙望東方，呼喚阿寶，餐風露宿，相思不絕，十年過去，她在此坐化成仙，化作相思鳥飛東而去和她的阿寶相聚，成了仙的夫妻倆專治人間瘟疫。”從此人們把眉毛尖稱著相思山，（相傳指點阿寶阿秀采藥的老人就是張良的老師黃石公）。

　　相思山后來又叫相師山，相傳西漢政治家、軍事家張良隨師黃石公在此修行摸道，留下了許多動人的傳說故事。張良是劉邦的高級謀師，為劉邦平定天下，建立西漢王朝立下豐功偉績。

　　張良目光高遠，洞察世事，功成身退，辭官歸隱，來到相思山跟隨黃石公潛心修道養性。黃石公高居白云庵，張良在山中修一草屋叫相師寺，此處竹茂林深、環境幽靜，張良潛心研道，漸成仙身，能藏行隱身。后來漢高祖劉邦思念張良，尋到此山，留下許多名勝遺跡，如系馬頭、白旗坳、黃旗坳、旗桿石等。

　　相師山因張良而聞名，它表達了人們對張良的敬愛和仰慕之情。相師山后來引來不少文人雅士登山攬勝，朝拜廟宇神靈，探尋先賢足跡。明清進士許伯正登臨相師山后在白云寺提聯曰：“相耶將耶轉番功名成泡影，師也友也空邀明月訪仙山”。此間有不少高僧文人墨客在這里修身與攬勝的傳奇故事不勝枚舉。