Jeho potomek Vilém Konojedský z Pojetic nechal v polovině 16. století nevelkou gotickou tvrz přestavět na renesanční zámek, jak to odpovídalo dobové módě a pohodlnějšímu životnímu stylu. Jeho syn Albrecht Kunetzký z Konojed a Pojetic se v roce 1618 účastnil stavovského povstání na straně vzbouřených stavů a po porážce povstalců mu byl veškerý majetek včetně konojedského zámku zabaven.  Jeho dcerám Magdaléně, Ludmile a Anně sice Česká královská komora přislíbila vyplacení náhrady, ale po urgencích jim byla vyplacena až v březnu 1629.

Panství Konojedy mezitím koupil horlivý katolík hejtman kladského hrabství Adam Gottfried Berka z Dubé. Poté se zde střídali majitelé, až v roce 1647 nebo 1650 ho získal generálporučík císařské armády Johann Sporck (Jan Špork). O tom, jak se Konojedy staly jeho  vlastnictvím existují dvě verze. Podle první z nich je Sporck dostal darem od císaře Ferdinanda III., podle druhé je koupil od zadluženého jezuity Václava Františka Liebsteinského, vzdáleného příbuzného Adama Gottfreida Berky z Dubé.