De teloorgang van de familie Ramp
Het Slot werd in 1640 verwoest, waarna het in opdracht van Jonkheer Engelbrecht Ramp weer is opgebouwd. Hierna woont de familie Ramp lange tijd niet meer op het Slot. Wel wordt het Slot enige tijd verhuurd aan Nicolaas van Teylingen en later aan Anthonis Studler van Surck.
Vanaf 1675 woont de familie Ramp weer sporadisch op het Slot.
Het zit de familie Ramp financieel niet mee en in 1739 wordt het Slot verkocht aan Graaf Willem Adriaan van Nassau (Heer van Bergen) Het Slot vervalt meer en meer en is in 1775 afgebroken.
De cache is geplaatst waar het kasteel ongeveer gestaan heeft. Nu staan er hedendaagse kastelen en worden er nog diverse gebouwd.