À partir du Moyen Âge jusqu'à sa disparition en 1790 pendant la Révolution française, Castagnac faisait partie du diocèse de Rieux.
Le plus ancien document qui mentionne un Seigneur à Castagnac concerne Bernadus de Castagnac et date de 1162. Les armoiries sont « d'or à croix de gueule » et correspondent aux armes des Lordat, ancienne famille de chevalerie du comté de Foix.
(source wikipedia)