Pod koniec XVIII wieku Jan Niezabytowski herbu Lubicz kupił majątek Oleszewicze od rodziny Baranowiczów. Kolejnymi właścicielami tych dóbr byli potomkowie Jana: syn Krzysztof, wnuk Konstanty i prawnuk Karol Niezabytowski. Po 1920 roku w wyniku działów rodzinnych Oleszewicze zostały własnością najmłodszej córki Karola, Ireny późniejszej Ronikier (1907–1984), która była ostatnią właścicielką Oleszewicz w 1939 roku[1][2].
Istniejący do 1939 roku pałac w Oleszewiczach został wybudowany przez szambelana Adama Baranowicza w celu przyjęcia w nim króla Stanisława Augusta polującego w tych stronach. Możliwe, że wcześniejszy dwór stojący w tym miejscu, który przebudowano na pałac, został wzniesiony jeszcze w XVII wieku. Nie wiadomo, czy król rzeczywiście odwiedził pałac. W latach 1850–1855 pałac został gruntownie przebudowany zgodnie z planami architektów Aleksandra Grodeckiego i Adama Idźkowskiego.
Pod koniec XVIII wieku pałac był parterowy, w części środkowej dwukondygnacyjny, wzniesiony na wysokich, sklepionych, zaopatrzonych w okna piwnicach.
Po przebudowie w połowie XIX wieku elewacja pałacu była dziewięcioosiowa z trójosiową piętrową częścią środkową, zaznaczoną ryzalitem. Przed pałacem był głęboki, parterowy portyk na wysokiej podmurówce, nad którym był, wsparty na czterech toskańskich kolumnach szeroki balkon z balustradką.
Elewacja ogrodowa była zdominowana przez dwukondygnacyjny ryzalit nakryty gładkim dachem trójspadowym, przed którym wybudowano wielki, oszklony prostokątny ogród zimowy. Prowadziły z niego szerokie schody do ogrodu i parku.
Wnętrze pałacu było początkowo dwutraktowe z regularnym podziałem na pokoje. Z czasem pokoje dzielono, co zaburzyło symetrię. W części środkowej od frontu był duży westybul z jednobiegowymi schodami na piętro. W trakcie ogrodowym centralne miejsce zajmowała wielka sala balowa, początkowo zapewne wysokości dwóch kondygnacji. Ściany sali, salonów i pokoi zdobiła bogata kolekcja cennych obrazów, z której Oleszewicze były słynne. Zbierał je głównie Konstanty Niezabytowski. Biblioteka liczyła kilka tysięcy tomów.
Pałac był otoczony pięknym kilkunastohektarowym XVIII-wiecznym staropolskim parkiem, który w XIX wieku został przeprojektowany w styl angielski. Przed pałacem istniał wielki, owalny, częściowo zadrzewiony trawnik z obiegającą go drogą dojazdową. Naprzeciw pałacu stał trzykondygnacyjny, podpiwniczony lamus z sześcioboczną wieżyczką widokową. Cały frontowy dziedziniec był otoczony kamiennym murem ze sztachetami. Po prawej i lewej stronie pałacu i lamusa stały dwie bramy wjazdowe zaznaczone każda trzema filarami. W obrębie folwarku stały stajnie i dwa ogromne zabudowania gospodarcze[2].
Pałac został ogołocony w czasie II wojny światowej, po wojnie jego mury stały przez pewien czas, po czym zostały rozebrane do fundamentów[2]. Z zabudowań gospodarczych majątku do dziś stoi jedynie ruina jednego z nich i ruina lodowni[4][5].