Ve druhé polovině 16.století vybudoval v Čechách pod Koštířem novou tvrz vladyka Matyáš z Hartunkova,. První zmínka o tvrzi je z roku 1570 a ze stavební dispozice pozdějšího barokního zámku lze usuzovat, že tato tvrz stála na místě jižního křídla dnešního zámku. Počátkem 17.století držel tvrz Albrecht Sedlnický z Choltic, jeden ze stavovského povstání, kterému byl statek Čechy v roce 1622 zkonfiskován. Později mu však Ferdinand II. udělil milost a statek mu byl vrácen. Sňatkem Albrechtovy dcery se Čechy dostaly do majetku Jana Baltazara Vettera z Lilie a po jeho smrti v roce 1665 je koupili Skrbenští z Hříště, kteří byli posledními majiteli z domácí šlechty.

 Kolem roku 1700buď za Skrbenských nebo za dalšího majitele knížete Jana Adama Ondřeje z Lichtenštejna, byla renesanční tvrz přestavěna na barokní čtyřkřídlý zámek. V 18.století se zde vystřídalo několik příslušníku cizí šlechty a až v roce 1768 koupil panství císařský tajný rada hrabě Emanuel Tellez Menezes a Castro Sylva-Taroucca ze starého portugalského šlechtického rodu. Tento rod jel jak držel až do roku 1945. Hrabě Ervín Sylva-Taroucca dal v letech 1839-1843 přestavět toto rodové sídlo do pozdně empírové podoby,kterou má dodnes.

Kolem zámku byl vybudován park a v něm doplňky jako altán,který sloužil Josefu Mánesovi jako letní malířský ateliér, při jeho pobytech na tomto zámku.Obrazy, které Mánes pro zámek vytvořil v povní polovině 20.století ve finanční tísni rozprodali v dražbách spolu s obrazy proslulé šternberské galérie, jejíž část zdědila po svém otci Leopoldina Sylva-Tarouccová. Teprve v roce 1957 , když byla v největším sále zřízena Mánesova pamětní síň se některé jeho díla věnovaná Čechám pod Kosířem vrátila zpět. Je to však jen nepatrné torzo umělcovy tvorby z tohoto prostředí.V zámku byla umístěna zvláštní internátní škola. Dnes jsou na zámku otevřeny jen dvě místnosti,kde můžete vidět dílo Josefa Mánese a malý zbytek zámeckého vybavení. V krásném parku pak altán,kde Mánes trávil letní čas a pseudogotická vyhlídková věž na kopci za rybníkem,která je zavřená.