Toppen ligg på ein rygg som strekkjer seg frå reservoaret i Talybont-on-Usk til A470. Vest for Corn Du går terrenget slakt nedover til Storey Arms ved A470. Mot aust stuper ryggen bratt ned til eit pass som knyter Pen y Fan med Cribyn. Frå Corn Du går det ein slak rygg sørover til Merthyr Tydfil.
Mange uerfarne klatrarar har mista livet på fjellet på grunn av raskt vekslande vêrforhold. Fjellet blir òg brukt i treninga av britiske spesialstyrker, spesielt i samband med utmarsjen «Fan Dance» under utveljinga til Special Air Service. Òg blant soldatane har det vore fleire dødsfall. Pen y Fan blir difor rekna av mange som den farlegaste toppen i Wales, sjølv om sjølve klatringa ikkje er spesielt teknisk krevjande.
