Mais à partir de l’an mille, et surtout au XII siècle, on les construit en pierre, de plus en plus grands, avec des murailles de plusieurs mètres d’épaisseur et des donjons encore plus difficiles à attaquer. Le donjon est entourée d’une enceinte de ou de remparts, eux mêmes formés de murailles et de tours qui protègent les portes fortifiées.