Anfang des 13. Jahrhunderts anstelle einer vorgeschichtlichen Burg als bedeutende Höhenburg der Grafen von Nassau errichtet und insbesondere im 15. und 16. Jahrhundert erheblich erweitert und ausgebaut.
Bedeutende Rolle unter Wilhelm I. von Oranien (1533 - 1584) im Feldzug zur Befreiung der Niederlande.
Seit dem 17. Jahrhundert langsamer Verfall, im 19. Jahrhundert teilweiser Abbruch.
Seit 1960 Freilegung, Restaurierung und Wiederaufbau von Bergfried und Vorburghaus.

Das Hilchenbacher Wahrzeichen wurde bis September 2009 außen vollständig saniert. Weitere Renovierungen sind im Inneren des Turmes erfolgt. Beteiligt an den Projekten ist der einheimische Verein zur Erhaltung der Ginsburg.