文廟應稱文祠，非縣治，所以不能供奉至聖先師孔子，而崇祀文學之神文昌、文衡等王位帝君，而制字先師倉頡，造型有4個眼睛，象徵觀察入微。文祠興建清嘉慶十一年，由當時的鹿港同知薛志亮率同鹿港士紳陳士陶所集資，涵蓋文廟武廟、文開書院三座之建築，一 字橫排，文武並肩，全台少見，為昔日鹿港文人論學及祭祀文昌君之處，也是讀書人精神信仰中心。