La población de Isle-Aumont se encuentra al sur de Troyes, se formó alrededor de un cerro ocupado prácticamente de manera ininterrumpida desde época prehistórica. En época merovingia existía en este lugar una pequeña iglesia que desde finales del siglo IV o principios del V es considerada como la sede de un monasterio. De esta época se descubrió una gran necrópolis. Debido a las inestabilidades de la época, la comunidad de Isle-Aumont se refugió en la abadía de Montier-la-Celle, más cercana a la ciudad. Troyes y su región fueron asoladas por los normandos el 888-889 y el antiguo monasterio desapareció. Un diploma de Carlos el Calvo menciona Isle, entre las posesiones de Montier-la-Celle.

Iglesia de Isle-Aumont
Sepulcros merovingios guardados en la nave románica

Iglesia de Isle-Aumont
Presbiterio románico con los restos carolingios en la zona inferior

En el siglo X se reconstruyó la iglesia y con el paso del tiempo el cerro fue ocupado por un castrum feudal, a finales del siglo XII y comienzos del XIII el conde Teobaldo I de Navarra levantó el castillo. El 1097, el conde Hugo I de Champaña dio la iglesia de Saint-Pierre de Isle-Aumont a la abadía de Molesme (Côte d'Or) que estableció aquí un priorato, se considera a Roberto de Molesmes cono fundador de esta casa. Hacia el 1104 el obispo de Troyes confirmó la fundación. Después de aquel acto, durante el siglo XII se levantó una nueva iglesia de tres naves, de la que se conserva el ábside y la nave central. La casa condal de Champaña continuó protegiendo el priorato, las donaciones a su favor permitieron reconstruir las dependencias priorales, al norte de la iglesia, entre ésta y el castillo.