Pałac Tomasza Zielińskiego położony jest w centrum Kielc, tuż koło XVII - wiecznego Pałacu Biskupiego. W 1846 roku do Kielc przybył nowy naczelnik powiatu Tomasz Zieliński. Rok później wydzierżawił zabudowania mieszkalne, które zostały przekształcone z dawnej szkoły jazdy konnej,"domu pisarza" i "domu praczki" w romantyczne założenie pałacowo-ogrodowe, z reprezentacyjnym salonikiem klasycystycznym w pałacyku. Dobudowano następnie oranżeria, oficynę z wieżą i basztę. Teren od strony parku został ogrodzony murem z elementami żeliwnymi i otworami strzelniczymi, zakończony charakterystyczną baszta zwaną "Plotkarką". Wybudowano też neorenesansowy pawilon, a tuż obok stajnię i wozownię. W taki sposób powstała siedziba kolekcjonera i miłośnika sztuk pięknych, która była jednym z pierwszych muzeów.
Zieliński interesował się sztuką już wcześniej, ale dopiero w Kielcach stworzył i udostępnił zbiór o wielkiej wartości artystycznej. Jego kolekcja była ogromna, posiadała 400 płócien malarstwa europejskiego od XV do XIX wieku, w tym obrazy Caravaggia, Jordaensa, Dolabelli, braci Breuglów, Cranacha Starszego. Oprócz tego około 700 rysunków i ponad 3200 grafik (w tym Rembrandta), 1100 przedmiotów sztuki użytkowej, 120 rzeźb, 150 medali, 500 walorów numizmatycznych, 2 tysiące okazów mineralogicznych,liczne militaria i około 12 tysięcy książek. Bywalcami pałacu byli m.in.: Józef Szermentowski, Franciszek Kostrzewski, Wojciech Gerson, January Suchodolski. W 1858 roku T. Zieliński umarł bezpotomnie, jego kolekcja uległa rozproszeniu,a pałacyk wkrótce sprzedano.W latach 40. XX wieku budynek przebudowano. W 1970 roku odkryto i odsłonięto liczne malowidła ścienne i sufitowe. W pałacyku od 1985 roku ma swoją siedzibę samorządowa instytucja kultury Dom Środowisk Twórczych, a oficynę zajmuje Państwowa Służba Ochrony Zabytków.