Benedictinos
 

Vila-sacra fue una posesión importante del monasterio de Sant Pere de Rodes desde el 1240, anteriormente era propiedad de los Cruïlles. Entre el siglo XIV y XV los monjes levantaron un palacio gótico.

A finales del siglo XVIII, y a causa de la guerra los monjes se trasladaron a Vila-sacra, al lado de sus propiedades. El traslado se efectuó el 1798. El 1805 pidieron un nuevo traslado a Figueres, hecho que se produjo en el 1818. Después de la desamortización, el castillo de Vila-sacra, también conocido como la Abadía, pasó a manos de particulares en una subasta.