Zgrada je izgrađena u stilu uobičajenom za reprezentativne osmenske rezidencije.
Konak su sagradili majstori Janja Mihailović i Nikola Đorđević, a radove vodio Hadži-Nikola Živković, nadzornik i neimar skoro svih građevinskih poduhvata kneza Miloša. Bogata unutrašnja dekoracija plafona, zidova i niša, delimično je sačuvana do danas. Za vreme svoje prve vladavine (1815-1839), Miloš je samo povremeno ovde boravio, a za druge vladavine sve vreme (1858-1860) proveo je u Konaku i tu umro 14. septembra1860. Jedno vreme u Konaku je bio Muzej kneza Miloša i Mihaila Obrenovića, zatim Šumarsko-lovački muzej, osnovan 1929.