Le jardin à la française créé au début du XXe siècle par le paysagiste Achille Duchêne s’étend devant la façade Renaissance du château. Les buis et des ifs taillés encadrent les pelouses.
Une roseraie a été aménagée en 2001 sous le direction du paysagiste Louis Benech. Elle comporte 160 rosiers appartenant à 40 variétés différentes.
Un parc à l'anglaise lui aussi créé par le paysagiste Achille Duchêne et revu par Louis Benech s'étend au pied des remparts, le long d’un cours d’eau. Ce parc présente des espèces rares d’azalées, de camélias, de nombreux rhododendrons et des arbres centenaires. Il est ouvert au public pour les Journées du Patrimoine et Rendez-vous au jardin .
L'imposante citadelle munie de huit tours et d'un donjon de 90 mètres date du XVe siècle. Elle a été partiellement détruite et un logis de plaisance avec une très belle façade de granit sculpté, un des premiers exemples de la Renaissance en France le remplace et a été restauré au XIXe siècle.