The history of the chateau in Zahrádky begins around 1556 when Kryštof Plot from Koňařiny is mentioned as the district commissioner at Nový Vítkovec (the previous name of the castle). It was built by Jan of Vartenberk, who had the interiors renovated as well. Since then, there were various possessors within the family of Vartenberk, of which Jan Jiří of Vartenberk was the last. As he had been an active participant in the rebellion against the Hapsburg power (1619-1620), his possessions were confiscated. The castle was bought in 1623 by Albrecht of Valdštejn. At that time, the furnishings were really valuable, there was an excellent library and a gallery, and an outstanding park with abundant valuable tree species. When Albrecht of Valdštejn was murdered (1634), the chateau was in the possession of his wife Isabella and later his only daughter Marie Alžběta, who married Rudolf Kounic, the chief gamekeeper. The Kounic family kept the property of Nový Zámek until 1897, when the family line died out. The chateau then went into the hands of Jan Lichtenstein and Emmanuel Liechtenstein. After 1945, the chateau was kept by the government authorities. In the 19th century, the rock canyon of the Robečský Brook (so-called Peklo) became a part of the chateau premises; at present, it is a natural monument with abundant presence of St. Agnes's flowers. The Valdštejn linden alley was added as well (trees aged 300 years): the alley leads through one of the oldest pheasantries in Bohemia, now breeding Angora goats and mouflons. Unfortunately, the chateau was burnt during a three-day-long fire at the turn of January/February 2003 and was seriously damaged. http://jicin.org/

Vdova po Václavovi z Vartenberka (viz rod šlechtické rodiny Vartenberkové) Kateřina sídlila do své smrti roku 1552 na hradě Vítkovci u 3 km vzdálených Holan. Roku 1547 se rozhodla pro svého syna Jana postavit nové sídlo svého rozsáhlého panství v Zahrádkách. Zámek byl stavěn u Robečského potoka na místě, kde o 200 let dříve stávala tvrz. Nazývala ho původně Nový Vítkovec a dostavěla jej se synem roku 1550. Zemřela o dva roky později, když stačila předtím své panství rozšířit dalšími nákupy. Nové sídlo bylo pojmenováno Nový zámek a celé území pak mnoho dalších let Novozámeckým zbožím, panstvím. Po bitvě na Bílé hoře Jan z Vartenberka roku 1622 panství včetně zámku ztratil a konfiskát koupil o rok později Albrecht z Valdštejna. Panství pak spojil do velmi rozsáhlého území Frýdlantského panství na severu Čech. Nový zámek nechal upravit do barokní podoby a u něj vybudoval zámecký park. Po Albrechtově smrti roku 1634 v Chebu zámek připadl jeho manželce a pak dceři Marii Alžbětě. Ta se provdala za hraběte Rudolfa Kounice z šlechtického rodu Kouniců. Ti provedli na zámku i v okolí další úpravy, např. nedaleký tok Robečského potoka přes údolí Peklo (dnes Peklo (národní přírodní památka)) upravili pro plavbu zámeckých hostí. Na zámek jezdili známí Češi – Josef Dobrovský, František Palacký, Pavel Josef Šafařík, Božena Němcová. V roce 1897 Kounicové po meči vymřeli, od dědiček zámek získal krátce rod Lichtenštejnů, kterým byl zámek roku 1945 vyvlastněn. Později zde vytvořilo Ministerstvo zahraničního obchodu Domov mládeže a středisko pro zahraniční studenty. S tím souvisí zajímavost, že se o Zahrádkách několikrát zmínil i africký student Mireček ve filmu Jak básníci přicházejí o iluze. Koncem 20. století jej měla v majetku pražská Univerzita Karlova a nechala jej upravit. 30. ledna 2003 zámek i s vybavením a obrazovou galerii vyhořel. Příčinou byl zřejmě elektrický zkrat, pozdní nahlášení a mráz znesnadňující hasební práce. Na budově byla škoda 87 milionů korun, na vybavení 4,5 milionů korun.