Miasto położone w powiecie ząbkowickim. W 1096 roku książę Czech, Brzetysław II wzniósł na wzgórzu warownię, która w 1200 roku stała się własnością śląskiej rodziny Pogorzelów. W 1207 roku decyzją księcia Henryka I Brodatego osiedlają się tutaj augustianie. Od 1249 do 1810 roku właścicielami dóbr byli cystersi z Lubiąża. W 1810 roku majątek przejęty przez państwo pruskie. W 1812 roku dobra zakupiła księżniczka Fryderyka Luiza Wilhelmina(1774-1837), siostra króla Prus, Fryderyka Wilhelma III. W 1791 roku wyszła za mąż za Wilhelma, księcia Niderlandów, w latach 1813-15 król Zjednoczonych Niderlandów. W 1815 roku została pierwszą królową Holandii. W 1830 roku przekazała zakupiony majątek córce, Wilhelminie Fryderyce Luizie Charlottcie Mariannie, zwanej Marianną Orańską(1810-1883), królewnie niderlandzkiej z dynastii Oranje-Nassau. Początkowo była zaręczona z szwedzkim księciem Gustawa Wazą, w którym była zakochana. Doślubu nie doszło na skutek presji dyplomatycznych. Od 1830 do 1849 była żoną brata ciotecznego, Albrechta Pruskiego(1809-1872), najmłodszego syn króla Fryderyka Wilhelma III i Luizy Mackelnburg-Strelitz. Z nim miała czworo dzieci. Od 1845 roku żyłą w separacji z mężem a w 1848 rozwiodła się z Księciem Albrechtem. Ze względu na związek ze swoim masztalerzem Johannesem van Rossumem obłożona została infamią. W 1830 roku otrzymała Kamieniec Ząbkowicki w posagu. W 1838 roku rozpoczyna się budowa pałacu w stylu neogotyckim zakończona w 1872 roku. Po  rozwodzie przepisała pałac na jedynego syna, księcia Fryderyka Wilhelma Mikołaja Albrechta(1837-1906). Z małżeństwa z księżniczką Marią von Sachsen-Altenburg miał 3 synów. Kolejnym właścicielem pałacu był Wilhelm Ernst Alexander Friedrich Heinrich Hohenzollern(1874-1940), bezżenny.  Majątek przepisał w testamencie bratanicom, córkom najmłodszego brata aczkolwiek część autorów podaje, że pałac odziedziczył wnuk cesarza i króla Prus Fryderyka III, Waldemar Wilhelm Ludwig Friedrich Victor Heinrich Hohenzollern (1889-1945). Mieszkał w pałacu z żoną księżniczką Calixtą Agnes zu Lippe – Detmold do kwietnia 1945 roku. W 1945 roku pałac został ograbiony i spalony przez wojska radzieckie. Do lat 70-tych XX wieku stał opuszczony, kiedy podjęto pierwsze prace zabezpieczające. Pod koniec lat 80tych XX wieku pałac wydzierżawił dr Włodzimierz Sobiech, który podjął wysiłek remontu pałacu. Zmarł w 2010 roku. Od tego czasu pałac ponownie pod zarządem samorządu lokalnego.

Pałac