W księdze lustracyjnej województwa mazowieckiego z 1565 r. opisany jest dwór i folwark w Chrzęsnem. Do niedawna mówiło się, że był to solidny, drewniany dwór obronny. Dziś – w świetle badań archeologicznych związanych z prowadzonym w pałacu remontem - wiadomo z całą pewnością, że dwór Wojsławskich był murowany. Datowane na późny gotyk spore fragmenty ceglanych fundamentów są nie lada sensacją. Wschodniomazowieckie budowle z tego okresu prawie zawsze były drewniane.
Istniejący obecnie pałac jest nieco młodszy, ale i tak posiada status najstarszego zabytku powiatu wołomińskiego. Wybudował go po 1623 r. nowy właściciel dóbr Chrzęsne - Stefan Dobrogost Grzybowski wraz z małżonką - Marią Joanną z Petingerów. W ciągu kolejnych wieków majątek przechodził przez wiele szlacheckich rąk. Pałac przebudowywano przynajmniej kilkakrotnie. Na przełomie XIX i XX w. pełnił rolę swoistego „salonu artystycznego”. To tutaj bywała warszawska śmietanka towarzyska, tutaj powstały najsłynniejsze dzieła polskiego impresjonizmu i tutaj także doszło do skandalu towarzyskiego, spowodowanego namalowaniem przez Podkowińskiego głośnego „Szału uniesień”. Dopatrywano się podobieństwa bohaterki obrazu do pięknej Ewy Kotarbińskiej – spędzającej wakacje w rodzinnym domu w Chrzęsnem lub do której z jej sióstr – Stanisławy Maszyńskiej albo Wincentyny Karskiej.
Podczas II wojny w pałacu kwaterowały wojska niemieckie, po jej zakończeniu – najpierw rezydował PGR, później zakład wychowawczy Towarzystwa Przyjaciół Dzieci. Nieużytkowany od 1997 r. powoli popadał w ruinę. Dopiero na początku XXI w. rozpoczęto szeroko zakrojone prace rewitalizacyjne. Podzielono je na cztery etapy: badawczy, projektowy, wykonawczy i wykończeniowy. Pierwszy pozwolił na dokonanie wielu ciekawych odkryć, drugi i trzeci spowodowały, że wnętrza pałacu ponownie przypominają dawną siedzibę ziemiańską, a w ramach czwartego odtworzono przypałacowy park.
Obecnie obiekt ten został w pełni odrestaurowany i wyposażony oraz bezpłatnie udostępniony zwiedzającym. Na terenie kompleksu w Chrzęsnem są organizowane liczne wydarzenia kulturalne, na których wstęp również jest wolny od opłat.