En 1522, Jean de BERNIS est Seigneur de la Cornaudric. Il est possible qu’il soit le constructeur d’un premier château, aujourd’hui disparu. En 1644, François de RESSEGUIER, Conseiller au Parlement de Toulouse, fait construire une chapelle. En 1766, Dominique de GERIE, écuyer, fait reconstruire le château et la chapelle.
Il s’agit du château que nous connaissons actuellement implanté au milieu d’un parc dominant la vallée de l’Hers. Quant à la chapelle actuelle, érigée en 1781, non loin de l’entrée du parc par Jacques GOUNON, Seigneur de La Cornaudric, elle fut « chapelle domestique » jusqu’à ce que fut construite l’église de L’Union, à la fin du XIXe siècle.