据清朝光绪《巴陵县志》记载，文庙正中为大殿，殿旁为东西两庑房，殿后为崇圣祀，祀东为明伦堂，殿前为大成门，门左为名宦祀，右为乡贤祀，外为棂星门，门外为泮池，池旁有井，专供祭祀孔子时沐浴盥洗之用。泮池呈半月形，上面架有石桥，名状元桥。行人至此，武宫下马，文官下轿。殿外围以红墙，左右门书德配天地道冠古今。

　　文庙为宋朝庆历六年（公元1046年）滕子京所建。那时候称岳州学宫，为当年岳州百废俱兴的壮举之一。后来经历了数十次重建与修葺，最后一次修葺是清同治十一年（公元1872年）。文庙坐北朝南略偏西，砖木混合结构，面阔5间，进身三间，宽28米，长20米，高 16米，占地548.5平方米。整个建筑工艺精巧，宏伟壮观。殿内有18根金柱，外有23根石柱，殿上檐是一斗三升斗拱，下檐出抱头梁，屋顶为重檐歇山式，翘首饰凤，覆盖黄色琉璃瓦，脊上为精巧的二龙戏珠陶制装饰。现存的木柱、木墩、石柱座为宋代构件；梢间部分明代有所改动；天花板上穿逗式梁架及前廊部分，是清代同治年间修建，1990年岳阳市人民政府又拨款大修，1983年被辟为湖南省重点文物保护单位。

　　始建于唐朝咸通年间的六合文庙为省级重点文物单位，占地8000平方米，规模居全国第五，大成殿、魁星亭、戟门、泮池等一应俱全，是南京江北地区保存最完整的古建筑群。雕梁画栋，气象庄严。当年南京夫子庙重修时，即来此取样。毗邻的万寿宫现已整修完毕，为棠城新景。