文昌阁位于谢沐河下游的村口，紧邻步瀛桥，始建于明万历四十八年，历史上其东侧曾建有廉溪书院，现只留存一栋建筑物。文昌阁面宽、进深均为10.5米，一、二层青砖砌筑，高9米，开小式窗；三、四楼为全木结构，抬梁做工考究，童柱所骑驼峰均采用莲花瓣座，具有明显的明代建筑特征；屋面为青瓦歇屋顶，斗拱飞檐，三重檐；通高约22米。整体呈护城墙箭型，庄重稳定，屹立旷野，蔚为壮观。