Le château s’est construit autour d’une tour datant du XIIIe siècle et a connu des transformations du XVe au XVIIe siècle. Ce château seigneurial fut le repaire de la famille des Siguier puis des Orgueil, suite au mariage de Jeanne de Séguier avec Bertrand d’Orgueil.
Le château va demeurer possession des seigneurs d’Orgueil jusqu’au milieu du XVIe siècle. En 1543, après la disparition du dernier des d’Orgueil, Bertrand de Montaigu hérite du domaine.
En 1552, Pierre de Montaigu épouse Catherine de Gauléjac, et en 1589, leur fille, Jeanne de Montaigu se marie à Pons de Bécave de Sérignac. Par alliance, les Salignac possèderont le château.
Avant la Révolution, en 1780, leur descendant, Safran de Durfort-Boissières, cédera le domaine au sieur Loudès, avocat à Saint Céré. Très délabrée vers 1970, la demeure sera sauvée de la ruine par un artiste-peintre britannique Anthony Gross…