Vendu comme bien national en 1789, après la fuite de ses propriétaires, le Château de Castelnaud sert de carrière de pierres. La tour d’artillerie et le corps de logis Sud perdent leur sommet. La végétation conquiert ensuite le monument qui tombe peu à peu dans l’oubli.