Hrad byl založen počátkem 14. století.
Po roce 1528 byl Vartenberky přestavěn na renesanční zámek.
Zpustl po požárech v letech 1693 a 1720.