In the 15th century, there used to be a stronghold which was later replaced by a manor. It got its Baroque appearance between the years 1732 – 1743 when architect František Maxmilián Kaňka was invited by the manor´s owner, František Josef Jiří of Wallenstein (1709–1771). In 1878, the four-wing building with a closed yard was completed with a large English park. In the back carriageway, you can see four Renaissance tombstones of the Lords of Jahn dating back to the 16th century. The tombstones represent the oldest physical evidence of Litvínov´s existence. The chateau was open to the public in 2015 (courtyard, park) and its visitors are now attracted by its long-term exhibitions (Srdceráj – The Heart Paradise – a monothematic exhibition of many appearances of the heart by artists Veronika Richterová and Michal Cihlář, an exposition of historic film technology from collector Miloš Štěpán and an exposition of sculpture by Stanislav Hanzlík). At present, the chateau is the seat of the Tourist Information Centre. The chateau also organises wedding ceremonies. http://imostecko.cz/

Na místě stávala tvrz, kterou nahradil panský dům, který postavil architekt Giovanni Domenico Canevalle (narozen 1637). Dům nechal do dnešní podoby přestavět majitel panství František Josef Jiří Valdštejn. V letech 1732 až 1743 tak vznikl barokní zámek se čtyřmi křídly obklopující uzavřený dvůr a dvěma přístavbami po stranách podle návrhu architekta Františka Maxmiliana Kaňky. Zámek byl určen jako jedno ze sídel rodiny Valdštejnů na duchcovsko-hornolitvínovském panství. Od konce 19. století ale sloužil zámek pro hospodářské účely a jeho interiéry byly přestavěny na byty a kanceláře. V roce 1878 byl za zámkem v prostoru bývalé zahrady založen osmihektarový zámecký park v anglickém slohu. Po první světové válce se majitelem zámku stal Československý stát. Po roce 1948 zde sídlila Správa státních lesů a v roce 1960 zámek získalo městské muzeum, které se v roce 1964 sloučilo s Okresním muzeem v Mostě. V 90. letech byly sbírky převezeny do depozitáře v Mostě a zámek přestal být využíván. V letech 1994–2000 probíhaly částečné rekonstrukce objektu. V roce 2006 Ústecký kraj zámek bezplatně převedl do majetku města Litvínova. V letech 2013 až 2015 prošel zámek rozsáhlou rekonstrukcí, která stály přes 32 milionů korun. V únoru 2015 pak byl zámek zpřístupněn veřejnosti.