Op 4 maart 1813 arriveerde Madison aan het Capitool onder begeleiding van mariniers en cavalerie. Opperrechter Marshall, een oude rivaal van Madison, zou de eed naar verluidt met tegenzin hebben afgenomen. In zijn inaugurele rede vatte Madison de Amerikaanse grieven tegen de Britten samen en probeerde hij de natie rond de oorlogsinspanning te verenigen. Na de inhuldiging organiseerden Madison en first lady Dolley Madison een inauguratiebal.