È figlio di Jean-Baptiste Pezon (1800-1849), venditore ambulante di Lozère, e di Catherine Cornut. È quindi fratello di Jean (1824-1874), soprannominato "Jean de l'Ours" e capostipite della dinastia circense Pezon di domatori,[1][2] di Pierre (1825-1895), di Théodore (1840-1880) e di Justin (1846-1875).[3]
Come i suoi fratelli, Jean-Baptiste ha trascorso la sua giovinezza in Lozère dove ha lavorato come pastore. All'età di 17 anni lasciò il suo villaggio natale, Rimeize, in compagnia di un lupo che aveva catturato e addestrato due anni prima. Andò a Parigi e acquistò il suo primo leone nel 1848.
A Parigi ottenne un grande successo, dove nel 1875 aveva raccolto e ingabbiato un gruppo di leoni che comandava sparando con una pistola.[3]
Il suo matrimonio con Hortense Muret fu celebrato il 6 febbraio 1855. Nel 1875 si esibì al Théâtre du Châtelet.
