Un château fort existait au XIe siècle, sérieusement malmené pendant la guerre de Cent Ans. Vers 1434, Guillaume, cadet de la maison de La Rochefoucauld, s’installa à Bayers et fit construire le château actuel. Jusqu’au XVIIIe siècle il appartenait aux La Rochefoucauld-Bayers.
La seigneurerie de Bayers dépendait de la baronnie de Verteuil et ses possesseurs portaient le titre de marquis de Bayers…
(source wikipedia)