文明阁坐落在黄姚镇东南天马山西麓，前依姚江，右旁螺峰，古刹宝亭层峦叠障，掩映在绿树丛中。它以雅致、幽静、豁朗、清新，位于旧黄姚八景之首。文明阁始建于明万历年间，清乾隆四十五年（公元1780年）、道光十年（公元1830年）、同治九年（公元1870年）及1926年4次重修。原有步云亭、文明首第、土地祠、豁然亭、福禄亭、惜字炉、天然图画、财神、大堂正殿、不夏亭、桂花亭、魁星楼等12处建筑物，今仅存8处，阁内历代名人题诗刻石颇多。

沿天马山而上，文明阁第一道门楼上书“文明首第”四个大字，是莫乃群1986年7月1日所书。两边写有一副对联“春入水逾响，秋高山更青”（丁卯年春箔重书）。沿着石梯向前走，就会看到旁边有一块石碑，上书“文明阁祀田碑”，为乾隆五十五年岁次乙巳桂月吉丑刊立。前面有霍然亭，亭前柱上书“上下江涵画阁添，东西岸隔烟波间”，内侧书“诸君到来不妨坐坐，朋友相会随便谈谈”，后面柱子上写道“有风花气犹迷阁 无雨岚光尚滴衣”。继续前行，第二道门楼上书“有声”二字，旁边写道“星临平野阔，山似络阳多”，门楼内有同治三年重修文明阁碑。依山而行，两旁可以看到古人登山留下的石刻，其中一篇为“余王至黄姚登文”。前边就到了惜字炉，是用来烧香的。上面也刻有对联，共有六句：前面为“赤文归造化，赤字幻霞烟”；左边上书“烟霞”，两边为“一炉纸化氨氯气，万古人存爱护心”；右边上书“风月”二字，两边刻有“迹民别风淮雨外，烟迷五岭一溪中”。惜字炉旁边石山上刻有“小西湖”石刻，为清代太史刘宗标于光绪戊寅初秋题。旁边刻有国民党陆军少将、本地人何武所题“蔚犹森秀”。笔法苍劲隽秀，时有游人拓本。继续往前走，旁边石上刻有“道光庚子年重建文明阁新建魁星楼并建亭至碑记”。至此到达第三道门楼，上书“天然图画”四个大字，旁边写道“乾坤风月归图画 山水烟霞入品题”，左下角立有“攀山石碑”，为乾隆三十年岁次乙酉仲夏吉早立。楼内有“重修文明阁碑志”（1999年2月8日立），介绍了文明阁及重修的有关情况。沿梯而上，进入大殿，殿内供奉着关公。出大殿前行，旁边石壁上刻有唐宋八大家之一的韩愈题书的“莺飞鱼跃”四个大字，下有“重阳登高联咏”，以及“新建不夏亭碑记”，再往前就到了七星亭，两边书有“清凉舒适合心情，静坐闲谈知己话”。转身再上，看到的阁楼就是魁星楼，里面供奉着“魁星公”。