门洞中心为穹窿顶，上有阴刻八卦石为上心。墩台四门上方嵌刻有红色大字，南曰：文昌阁；北曰：锺楼；东曰：鼓楼；西曰：“山楼”。钟鼓二楼及旗杆早年拆毁，今两侧石基清淅可见。文昌阁高约7.5米，单檐歇山瓦顶，黄绿两色琉璃乘脊，面阔3间，进深两间。顶部有九脊吻兽、飞檐翼角、斗翘昂拱等级为精湛。据市文化局考古工作者高鸿宾同志实地调查，在正脊下发现墨迹，书“明万历肆拾陆年建立”等字样。据此年代推算文昌阁始建万历四十六年（1618年），它比堡城建筑时间晚191年，距今有360年。