Construit à partir du début du XIe siècle par les premiers seigneurs de Lavardin, le château sera vendu au comte de Vendôme vers 1130, dont il devint la principale forteresse à partir de la fin du XIIe siècle. Complètement remanié au XIVe et XVe siècles, il fut enlevé aux Ligueurs en 1589, puis démantelé l'année suivante sur ordre d'Henri IV, duc de Vendôme et roi de France.