En 1232, sur injonction royale, le Seigneur de Rassiels, Raymond de Lard, a fait don de sa terre « les Bouysses » à Dame Guillemette, seconde abbesse de Leyme, pour qu'elle y fonde un prieuré cistercien où s'installèrent une douzaine de religieuses.
Pendant la guerre de Cent Ans, ces dernières furent expulsées par les Anglais de leurs terres qu'elles récupérèrent en 1600. Le domaine, transformé partiellement en vignoble, produisait déjà un cahors. Les religieuses de Leyme le firent prospérer. En 1745, elles autorisèrent même la démolition de leur chapelle pour construire à la place un chai.
Devenu bien national avec la Révolution, le domaine est cédé en 1791 à François Agar, maire de Mercuès, négociant en vin à Mercuès et à Paris-Bercy qui fait reconstruire le château sur les anciennes caves. Mis en faillite par l'incendie de ses entrepôts de Paris, François Agar vendit le domaine des Bouysses, en 1823, à l'un de ses cousins, Jean-Michel Agar, comte de Mosbourg. Ce dernier, qui devait son titre à Louis XVIII, fut ministre des finances du roi de Naples, Joachim Murat, son ami qu'il avait cotoyé au Collège de Jésuites de Cahors (devenu par la suite, lycée Impérial, Royal puis lycée Gambetta). Il revint dans le Lot après la mort de Murat en 1815, et devint député du Lot de 1830 à 1834, et président du Conseil général du Département du Lot pendant 14 ans.
Mosbourg fit construire ou reconstruire la plupart des bâtiments du château tel que l'on peut le voir aujourd'hui. Notamment un escalier à double volée et un élégant perron de style italien, souvenir de ses voyages. L'orangerie fut construite en 1820. À côté, ont été aussi construites des écuries.
L'héritage du Comte de Mosbourg dont le fils n'avait pas eu d'enfant, passa à la fin du XIX siècle, aux neveux de ce dernier, les Vicomtes de Rougé, descendants de la longue lignée, mentionnée depuis 1045, attestée depuis 1375, de la Famille de Rougé. Le dernier vicomte, « inventeur » sans brevet des « queues d'avion » céda peu à peu son domaine. La famille Marre en devint ainsi propriétaire en 1933. Cette famille est toujours propriétaire du domaine et du château.
Des travaux de réhabilitation du château qui avait beaucoup souffert au cours des ans ont été entrepris.
- 1996 à 1998 structures maçonnerie et toiture
- 1998 à 1999 création des salles et salons du 1 étage
- 2002 ouverture du salon Tanat
- 2003 ouverture chambre du Comte
- 2004 ouverture de la maison de la Treille