Bygningen blev oprindelig opført af daværende præsidentTirésias Simon Sam som residens for den magtfulde familie Sam, hvor blandt andet to af landets præsidenter kommer fra.
Da USA i 1915 besatte Haiti og Sam-familien flygtede, blev ejendommen taget i brug som militærhospital af de amerikanske besættelsestropper indtil 1935, hvor USA trak sig tilbage.
Ejendommen blev herefter udlejet til den svensk/tyske skibskaptajn Werner Gustav Oloffson, der indrettede stedet som hotel.
Hotel Oloffson gav inspirationen til Graham Greenes fiktive Hotel Trianon, beskrevet i romanen Gøglerne fra 1966.