Budowa pałacu rozpoczęta została na zlecenie ówczesnego właściciela Jabłonny biskupa płockiego, późniejszego prymasa, Michała Poniatowskiego w roku 1774 według projektu architekta Dominika Merliniego. Przy pracach zatrudnieni zostali najwybitniejsi artyści, m. in. malarze Antonio Tavellio, Szymon Mańkowski, Michał Wróblewski. Od roku 1778 przy urządzaniu wnętrz pracował architekt Szymon Bogumił Zug. Całość pomyślano jako zespół trzech budynków: usytuowanego centralnie parterowego pałacyku będącego mieszkaniem właściciela oraz dwóch bocznych dwupiętrowych pawilonów. Pawilon lewy zwany był Królewskim, ponieważ służył jako mieszkanie Stanisławowi Augustowi. Pawilon prawy przeznaczono dla gości, a przylegającą do niego piętrową oficynę ? dla dworu i kancelarii prymasa. Angielski park krajobrazowy powstał w latach 70-tych i 80-tych XVIII wieku według projektu Szymona Bogumiła Zuga na miejscu barokowego ogrodu, z którego rozpościerał się widok na dolinę Wisły. Zug wzniósł również szereg pawilonów, z których do dziś przetrwały: grota, oranżeria i pawilon chiński.
W latach 1834 ? 1843 pałac przebudowano według projektu architekta Henryka Marconiego. Pałac został spalony w roku 1944, odbudowany według projektu architekta Mieczysława Kuźmy z pominięciem większości zmian wprowadzonych przez Marconiego.
W skład zespołu pałacowo ? parkowego, oprócz samego pałacu, wchodzą: Oficyny, Pawilony, Oranżeria, Łuk Triumfalny, Altana chińska, Stajnie i wozownie, Grota, Brama wjazdowa, Park, Dom rządcy.