Situé à flanc de colline près de la vallée de l’Oust ; propriété de la famille du Houlle qui lui a donné son nom d’origine, il fut la propriété d’un compagnon d’arme d’Olivier de Clisson, son seigneur et voisin, puis a appartenu à différentes familles de sa descendance. Sa façade est plutôt Renaissance mais la salle basse à l’intérieur est typique des manoirs de l’époque Gothique.