La costruzione del castello risale ai secoli X o XI. In realtà è costituito da due strutture distinte, il Petit Château e il sottostante Grand Château. Per 450 anni, a partire dal 1230, ne furono comproprietari i vescovi di Tolosa. Il castello fu saccheggiato e parzialmente distrutto da una banda di briganti nel 1792. Da allora divenne praticamente una “cava” di materiale da costruzione. Oggi è di proprietà privata.