Il devient champion du monde des poids légers le en battant aux points lors de leur second combat Wallace Bud Smith. Il conserve son titre 11 fois avant d'être détrôné par le portoricain Carlos Ortiz le [1]. Ce combat est le tournant de la carrière de Brown car il s'ensuit une longue série de défaites jusqu'à sa retraite sportive en 1970, à 44 ans.
Ère moderne : dernier combat après 1988 ; anciens temps : entre 1893 et 1942 (première ère) et entre 1943 et 1988 (deuxième ère) ; pionniers : avant 1893.