Les monuments visibles aujourd'hui sont plus récents : le donjon (milieu du XII siècle) qui servait au seigneur pour recevoir ses sujets ; la tour au Puits (milieu du XV siècle) destinée à la défense de l’entrée du village côté Chaumont; différents remparts et tours de défenses côté Valnoise ; la grosse tour Canonnière (fin XV siècle).
La façade, vers la vallée, fut complétée d'une porte renaissance armoriée donnant de plain-pied sur la salle basse, probablement au temps d'Henri de Lenoncourt, pour qui Vignory fut érigé en baronnie en 1555.De l'enceinte du château ne restent que des segments de courtine et une grosse tour d'artillerie dominant la vallée et le village, dite tour du Puits, écrêtée en 1846. Deux autres tours de l'enceinte, démolies au cours du XIX siècle, comportaient des canonnières, attestant l'importance de l'adaptation du château à l'artillerie. Le logis, auquel tenait une de ces tours, encore couverte en 1840, a complètement disparu. La tour s'est écroulée le 7 juin 1913.
Malheureusement d’autres monuments ont été détruits ou ont disparu faute de réparations : chapelle, maison seigneuriale, colombier, les deux porteries d’entrée et leur pont-levis… Des maquettes reconstituant l’aspect originel du château sont visible sur le site.
