Około 1700 roku, w związku ze ślubem Ludwiki z Opalińskich z Janem Kazimierzem Sapiehą herbu Lis, właścicielami majątku stali się Sapiehowie (posiadłość wniosła w posagu żona) . Niestety jednak w 1702 roku zamek ponownie spłonął i popadł w całkowitą ruinę.
Pałac barokowy Po śmierci Jana Kazimierza w 1730 roku majątek odziedziczył ich wspólny syn - późniejszy wojewoda smoleński Piotr Sapieha, ożeniony z Joanną Sułkowską. To właśnie on około 1749 roku wybudował barokowy pałac. Architektem pałacu był Karol Marcin Frantz, nadworny architekt rodziny Sułkowskich. W założeniu miała to być rezydencja czworoboczna, czteroskrzydłowa, z dziedzińcem wewnętrznym. Budowa pałacu nie została jednak ukończona w całości. Udało się wybudować dwa skrzydła, południowe i zachodnie, oraz częściowo północne i wschodnie, które zostały rozebrane jeszcze w XVIII wieku. Za czasów Piotra Sapiehy zaprojektowano również park z alejami ozdobionymi kamiennymi rzeźbami.