Byen blei grunnlagd av jernbaneeigaren Arthur Edward Stilwell sist på 1800-talet. Ein by kalla Aurora eller Sparks hadd allereie lege her sidan 1840-åra, men var blitt forlaten.
Port Arthur bygde seg opp på olje, og hadde ei tid det største nettverket av oljeraffineri i verda.