Neumann studerade vid konstakademien, blev marinmålare och utförde en rad förtjänstfulla arbeten inom denna konstart, däribland Danska linjeskepp till ankars under Englands kust (1859), Fartyg under land efter en by (1867), Peder Bredal vid Nyborg 1658 (Frederiksborg), Slaget på Köpenhamns redd 2 april 1801 (diorama). Konstmuseet äger Fiskare på Skagen och Stranden vid Hornbæk. Han tilldelades Thorvaldsenmedaljen 1867.