Il est construit en 1649 par Thomas de Maniban, avocat au Parlement de Toulouse.
De nombreux éléments subsistent de cette époque : le monumental escalier d'honneur,
l'ancienne salle d'armes,
et la chapelle,
qui possède notamment un tableau de Sainte-Catherine du 17e siècle.