En ce site prestigieux, il y a près d'un millier d'années, les moines bénédictins érigèrent une église romane dont il ne reste que quelques ruines enfouies dans la verdure, et une métairie dont le souvenir est encore fortement inscrit dans l'aile Est et dans une cour intérieure des bâtiments.
Ici se trouvait le hameau primitif des Angles dont la première mention historique remonte à 1097.
En 1738, Jean Hyacinthe Calvet fit construire ce "château", orienté vers le sud, et qu'il vint accoler aux restes de la métairie remaniée à cette occasion.
Après avoir appartenu au 19ème siècle à Armand de Pontmartin, le domaine traversera après sa mort en 1890 une longue période de silence.
En 1938, tombé amoureux du domaine, le peintre Louis Montagné membre du convivial et célèbre "Groupe des Treize", lui redonnera une âme.