Hrad pak úspěšně odolával všem útokům až do roku 1645, kdy jej překvapilo švédské vojsko v počtu 3 000 mužů, kteří sem nepozorovaně pronikli ve směru od Babic. Posádka pevnosti nebyla příliš obezřetná, muži byli údajně opilí a hráli v bráně kostky, a tak měli Švédové usnadněnou úlohu.
Roku 1655, v době tureckého nebezpečí, byla pevnost částečně opravena a v roce 1706 byla postavena nová věž. Ta však byla v roce 1842 při výstavbě železniční trati snížena z obavy, že by se mohla zřítit do údolí. V letech 1800-1806 rod Lichtenštejnů přestavěl Nový hrad na lovecké sídlo. Počátkem 20. století byl zámek částečně upraven v romantickém stylu.
V roce 1990 převzala tuto významnou kulturní památku do své správy 21. základní organizace Českého svazu ochránců přírody Brno.
