Urodził się w Saksonii na zamku Hubertusburg. Był najmłodszym z siedmiu synów Augusta III, króla Polski i elektora Saksonii i Marii Józefy. W 1760 wstąpił do armii austriackiej. 17 maja1761 przyjął święcenia kapłańskie. W 1763 został biskupem Fryzyngi i Ratyzbony. Dzięki połączonemu poparciu dyplomacji Austrii i Francji został 10 lutego1768 arcybiskupem Trewiru i biskupem Augsburga. Brał udział w działaniach dyplomatycznych konfederacji barskiej, zachęcał oficerów swych wojsk elektorskich do niesienia pomocy konfederatom. W czasie rewolucji francuskiej jego elektorat stał się schronieniem dla emigracji rojalistycznej. W sierpniu 1794, gdy wojska rewolucyjne podeszły pod miasto, wyjechał do Augsburga, gdzie pełnił funkcje biskupie. Na mocy pokoju w Lunéville w 1801 pozbawiony został arcybiskupstwa i tytułu elektora.
