Дворец был заложен в 1779 году. Его архитектором стал Джузеппе Сакко – итальянский архитектор, долгое время работавший в Варшаве. По его проекту, следуя традициям барокко, была построена центральная часть дворца. Однако в некоторых деталях уже ощущалось влияние классицизма. В начале XIX века к центральному зданию были пристроены боковые флигели и галереи-колоннады, соединившие все постройки в единый комплекс. Планировка этажей соответствовала архитектурной моде второй половины XVIII – начала XIX веков. Справа находился парадный вестибюль с широкой лестницей, который коридорами соединялся с боковыми комнатами. На втором этаже кроме жилых комнат был расположен парадный зал с колоннами. Вокруг дворца был разбит английский парк, посажены сад и лес из грабов, сосен, кленов, а также созданы пруды, оранжереи и пасека. В XVIII—XIХ веках резиденцию Воловичей в Свяцке также окружали рвы, наполненные водой, которые частично сохранились и до наших дней.
Судьба дворцово-паркового ансамбля – не простая. В конце XIХ века магнат Волович проиграл родовое имение в бильярд. Позже оно за долги перешло к государству. В 30-е годы XХ века дворец частично реконструировали и приспособили под медицинскую клинику. Из внутреннего убранства дворца до наших дней сохранились камины, обрамление дверей и частично лепка.
Сейчас в архитектурном ансамбле XVIII века проводится реконструкция. Первая очередь работ уже завершена: начал работу колоритный ресторан-пивоварня «Свяцкі бровар» , а также очень красивая и уютная гостиница «Свяцкі Палац».
Напротив дворца находится часовня в неоготическом стиле.
