怀城文阁位于怀集县怀城镇沿江东路，由文昌书院和文昌阁两部分组成，总建筑面积576平方米。
文昌阁又称文昌塔，始建于明万历四十七年（公元1619年）八月，天启元年（1621年）三月竣工，清顺治十四年（1657年）、康熙三十六年（1697年）、同治四年（1865年）、光绪二十八年（1902年）、民国15年（1926年）作过多次修缮。塔高25米，分五层，塔体为六角形。门正上方书有“梯云”二字，每层窗口由下至上依次书“得禄”“桂籍”“参天”“文阁”等字体，取“万般皆下品，唯有读书高”之意。塔体每层檐下描有花纹图案，顶端铁杆上串有一瓷瓷葫芦，六角均装有翘首，工艺精巧。文昌阁前建有书院，称文昌书院，为县令谢君惠于明万历四十七年（1619年）所建。书院占地面积430平方米，有山门、庭院、正堂、厢房等。面阔三开间，两进两廊，硬山顶，灰塑博古脊，石门框。20世纪50年代，书院被拆，仅存文昌阁。1991年，怀集县人民政府按原貌修复书院。2008年11月8日，广东省人民政府办公厅发出《关于公布第五批广东省文物保护单位通知》，怀城文阁被列入广东省文物保护单位。