有人说，因周围地势相对平坦，晨曦晚照，可观日出日落，无时不光，遂取岱岳向阳之意，称之为岳阳山。岳阳山又称五龙山，因岳阳山前有五条长岭，犹如五条盘踞的长龙，故称五龙山。
《续修博山县志》载：“岳阳山，县东南三十里，居县境中心，…，有九十九顶，其绝顶有神庙三院。”又：“石寨山，县东四十里明永乐十八年妖妇唐赛儿作乱曾据此，山巅有石垣、寨门遗址尚存。”岳阳、石寨作为两山记载，可能依于乾隆旧志。现据实地考查，岳阳山周围十里内并无叫“石寨山”的，更无“石垣、寨门”遗址，可能同指岳阳山主峰。
岳阳山，山奇景美，绿色植被覆盖率达90%，林木绿化达到了80%，除人工栽植的侧柏、刺槐、平柳等树种之外，还有众多的野生植物，如黄楝、红叶、山榆、紫檀、柚梗等上百种。这些野生植物，秋后叶子变红了、变黄了、紫了，点缀得岳阳山更加妖绕妩媚多姿，山上有枸杞、丹参、山药、何首乌、地龙、金银花等上百种中草药，有铅、钨、煤、石英、铁石、砩石等几十种矿藏。狼、獾、蛇、兔、狐狸、果子狸等动物在山中出没，山鹰、喜鹊、杜鹃、金鸡、啄木鸟等上百种鸟类在林中歌唱。
从山之阳登岳阳山，主要道路有三条：第一条在主峰的前怀，偏西，蜿蜒曲折，由沟至岭，反复上下，榛莽丛生，行人穿梭其中，犹如置身于绿色的海洋中。另一条在主峰东侧，幽峭辗转，环山而行，别有风光。再一条在主峰西侧，这一条路可以说是登岳阳山最好走的一条路。
自焦裕禄纪念馆向北，沿一条农田果园的深沟走一公里的路程，就到了山前的盘路，人工砌成的石阶盘旋而上，是名副其实的七十二盘道。这条青石板路，是在一九三七年由岱庄、北崮山等村集资修建的。沿着青石板的七十二盘道登上山去，便是岳阳山主峰，映入眼帘的是古朴的庙宇和耸入云端的通迅、电视转播铁塔。过去是山到绝顶庙为峰，而今却是巍然铁塔入云中。进得山门，楼台庙宇，香烟缭绕，仿佛进入了佛家净地，高山之巅，也使人有神清气爽之感。登上主峰举目四望绵延起伏的群山，整齐有序的农田，绿树掩映下的农家村落，岳阳山主峰向东二公里的地方就是岳阳山卧佛，几个山头组成的佛像，极像一尊安详仰睡的弥勒佛，山峰向东不远处有极其险峻的仙人台，仙人台之险之幽，真是一处人间仙境。这里还有一条2公里多长的桃花峪，桃花峪如一条深长的大峡谷，茂密的树林、灌木丛，陡峭的悬崖，景色异常秀美。从岳阳山顶低头下望，千道沟壑，万丈深渊，真有点让人头晕目眩。岳阳山虽海拔只有811米，但此山却以险峻而驰名，特别是山阳前崖，悬崖峭壁，如刀劈斧削一般，如从山前直接登上峰顶，看来只有攀崖的探险家才敢去试一试。观音阁南门石匾有题“峻极于天”，乃乾隆年间孙以宣之笔，从题词可见岳阳山之险峻
岳阳山上的建筑群曾有七楼八阁十三殿之说，是否真有，已无从详考，但从历代因战乱而毁坏的残垣断壁来看，这里曾经有异常宏伟宠大的建筑群
岳阳山上的建筑始于元代，有记载的是明嘉靖十五年(公元1536)重建神农庙，亦称天开庙，重修后称后土真君庙，此建筑可谓岳阳山建筑之鼻祖。碧霞元君祠建于清康熙丁未(公元1667)刻有“碧霞驻节”门匾。后殿为二层，上层为玉皇宫，额刻“金阙云宫”，仍显现其雄浑古朴的气势，整个建筑井然有序，群峰危耸，乃本山之最高建筑。玉皇宫东西有窗，人们说在晴日“东边观日出，西边可望岱(岱：指泰山)”，《博山乡土志》记有：“极目西南见有黑云拂地是为泰山，开其东窗日出东海的景观更可远远望见。”
登岳阳山顶，极目四望，起伏的山峦如大海的波涛，广袤的田野如优美的画卷。天上人间，沧海桑田，大自然以神奇的魅力造就了人间仙境。传说泰山奶奶恋慕这仙山美景，在这里住了下来。当地人为她建了七楼八阁十三殿，共有九十九间。泰山奶奶在此住下之后，便令龙王爷的七子来给她当侍卫，也就是岳阳山前天津湾村南的龙头山，为了取水方便，泰山奶奶用鞭子点出一个龙湾，也就是现在泉河头的老龙湾。将士为其把门也就是现在源泉的二郎山，两位童子闲来无事就到岳阳山东边一个平整的山崖上去玩耍，所以称这个地方叫仙人台。如来佛也来到岳阳山，并在此睡了一觉，岳阳山主峰向东看2公里处，几座起伏的山头，极像一座仰卧安睡的佛像。关于泰山奶奶因何去了泰山，有的说泰山奶奶嫌岳阳山不够高，抽了三鞭，山没有长起来，山半腰的岩石上还留有被钢鞭抽打的痕迹。也有的说，有一次玉皇大帝召见泰山奶奶，议完事回来之后，泰山奶奶曾在泰山歇了歇脚，因打了个盹，当地人便供奉起她来，说什么也要让她搬到那里，并许诺给她建庙进香，泰山奶奶看到当地人十分虔诚，感到很不忍心，便回到岳阳山，把岳阳山的山头放在袖口里连夜放到了泰山顶上，泰山极顶就是岳阳山山顶。岳阳山周围有100个山头，被泰山奶奶袖走了一个，便成了九十九个，这也就是人们称九九岳阳山的来历 
