文化大革命期间，太子阁遭到毁坏，后来一直没修复。“太子阁”是当年刘备屯兵新野时，甘夫人所住的阁楼，因太子阿斗（即蜀后主刘禅）在此出生而得名“太子阁”。 “太子阁”内有太子阿斗的塑像、头戴王冠、身穿龙袍、面北向南，面壁而坐，意喻“面壁思过”。这是全国唯一的面壁祖像。

建安十二年（公元207年）春，刘备的甘夫人在此处梦见一星斗入腹，后怀孕生下一子，取名刘禅，乳名阿斗。刘备在弃新野、奔樊城、败当阳时，甘、糜二夫人及太子阿斗被乱军冲散，赵云单骑冲杀，救阿斗于十万曹军之中。刘备去世后，诸葛亮鞠躬尽瘁扶佐刘禅继承汉业；但刘禅胸无大志，乐不思蜀，最后丧失了蜀汉江山。太子阁内塑有刘禅塑像一尊，面壁而坐，神态呈思过状，这是人们取刘禅无脸见父老乡亲、悔恨自己无才无德之意。阁楼四周彩绘了甘夫人作梦、生阿斗、赵云救刘禅等故事画面。