早在清朝道光年间，这里就建有供奉关公和孔子的益化堂、龙凤宫。一九三二年，日月潭建坝储水，将漫淹两座古庙，虔诚的乡民决议迁庙。在地方人士的奔走下，一九三四年觅得现址，将两庙合一，创建文武庙，一九三八年完工。一九六九年，文武庙开始大规模扩建，在扩建的六年间，蒋介石先生曾先后七次巡视，垂询工程进度与经费筹措，动员各界