Pańska Góra położona jest w środkowej części Lasockiego Grzbietu, w bocznym ramieniu, odchodzącym ku północnemu wschodowi od Kopiny, na południowy zachód od Jarkowic i na północny zachód od Opawy[1].
Północne zbocza opadają stromo do doliny Srebrnika, południowe opadają łagodnie w stronę Opawy. Na południowym zachodzie łączy się z Owczarką, natomiast na wschodzie znajdują się najdalej na wschód wysunięte wzniesienia Lasockiego Grzbietu - Tylna Góra, Książęca Kostka i Przednia[1].
