Син відставного майора Баварської армії і комісара з попереднього відбору коней Адольфа Ріттера фон Манна і його дружини Аліни, уродженої Гешель. Молодший брат генерал-лейтенанта люфтваффе Германа Ріттера фон Манна.
24 липня 1911 року вступив в 14-й піхотний полк Баварської армії. Учасник Першої світової війни, командир роти. Манн неодноразово постраждав під час війни; 25 серпня 1914 року був важко поранений осколками снаряда; з 12 липня по 20 жовтня 1915 року лікувався через загострення наслідків поранення в руку; 4-7 жовтня 1916 року переніс нервовий шок; 28 липня 1917 року отруївся газом; з 3 жовтня 1918 по 29 травня 1919 року хворів на малярію і тиф. В травні-липні 1919 році служив у мінометній роті фрайкоруЕппа. Після демобілізації армії залишений в рейхсвері. 1 квітня 1934 року призначений в штаб комендатури Мюнхена, з 1 жовтня 1937 року — комендант. З 25 жовтня 1939 року — командир 109-го піхотного полку. З 1 лютого 1941 року — комендант штаб-квартири вермахту в Бухаресті, з 15 березня по 1 липня 1944 року — військовий комендант Бухареста. З 15 липня 1944 року — військовий комендант Мюнхена, одночасно з 14 вересня 1944 року — командир оборонного району «Центр» в 7-му військовому окрузі. З 23 квітня 1945 року — міський комендант Мюнхена. 25 квітня знятий з посади, а його повноваження були передані бойовому коменданту, групенфюреруСАБернгарду Гофманну. 30 квітня взятий в полон американськими військами. В 1947 році звільнений.