Vers 550, l'ermite Goar d'Aquitaine y a fondé une cellule. Nous n'avons aucune information sur les premières constructions. Les reliques de Goar y étaient conservées et vénérées. La cellule fut placée en 765 par Pépin sous l'autorité du monastère de Prüm. En 781, un nouveau bâtiment fut construit sous Charles, consacré par l'évêque de Mayence Lullus, décrit dans les sources comme étant "d'une taille remarquable" et conçu pour un pèlerinage intense. En raison de cette source, de la proximité de Pépin, de Charlemagne et de Prüm, ainsi que d'une construction occidentale romane ultérieure, plusieurs éléments plaident en faveur d'une construction occidentale carolingienne. Après un incendie, une nouvelle construction a été entamée en 1138, d'abord avec la crypte, qui a été conservée. En 1250, le choeur fut reconstruit, suivi en 1444-1469 par la construction de la maison longue de la halle en utilisant la crypte et des parties de la tour ouest de 1138.