十字军东征后，带回新的防御技术和攻城工程师，使城堡的设计得到改进。同心的城堡从中心点扩展，由两堵或更多的环形城墙所包围。最初以方形的箭塔来加强城墙的防御力，后来则改为圆形的箭塔。因为方形箭塔的角落会很容易受到夹击，使整个箭塔极易受创，而圆形的箭塔则更具有抵抗力。在城墙和箭塔的顶端可加设更多的战备，让它们更具有向下攻击的能力。　虽然火炮出现于十四世纪初期的欧洲，但是直到十五世纪中期以前，并没有使用到有战力的攻城大炮。随着火炮的威力提升，人们也开始改变城堡的设计做为因应。以往高危险陡的城墙被低矮倾斜的城墙所代替。到了十五世纪中期，由于王权的扩张，城堡开始出现衰落。十一世纪时，征服者威廉宣称拥有英国所有的城堡，并从贵族的手上把它们收回。到了十三世纪，城堡的建造或强化必须得到国王的同意。其目的就是为了废除城堡，让它们不能作为叛乱的依靠。　城堡被废置，有四分之一仍然为贵族所保存，其他则沦为废墟。由于财富的生产从农村转到城市，防御设施强化的城镇反而变得更为重要。　城堡的建造，可以花费不到一年便能完成，也可能耗上二十年的时间。数个世纪以来，建造城堡是一门重要的工业，出名的石匠大师受到殷切需求，而结群成伙的城堡建造者会从一个地方换到另一个地方工作。城镇希望雇用熟练的工人来建造大教堂，而领主也希望雇用他们来建造城堡。