C’est le neveu de Marguerite de Fumel, Joseph-Louis de Fumel qui en hérite en 1788. Il émigre dès octobre 1789, et le château est adjugé comme bien de la Nation. Tout le mobilier est dispersé, les toits, planchers et boiseries démontés en 1794. Lorsqu’après Thermidor, les Fumel récupèrent le château, ils ne l’habitent pas, et le vendent.
Il passe de mains en mains jusqu’à son achat en 1860 par la commune de Fumel, qui obtient le classement comme Monument historique (1862). La commune fait procéder à quelques travaux de restauration par B. Cavailler en 1868 et par l’architecte de l’arrondissement A. Gilles en 1876. L’architecte des Monuments historiques restaure le donjon de 1882 à 1886. D’autres réparations ponctuelles ont lieu de 1898 à 1900, dont la couverture en lauzes de la guette du donjon qui est refaite en 1900 ; d’autres travaux ont lieu en 1948-1950, 1977 et 1985. Une dérestauration du donjon est effectuée en 1956. En 1956 Max Pons avec l'aide de Fernande Costes reprennent le château en main . Ils font passer le château de 3 000 visiteurs en 1956 à 70 000 visiteurs par an en 1991 .