슈페어는 건축가가 되기로 한 자신의 결정이 그의 아버지와는 아무런 관련이 없다고 주장했다. 그는 건축보다는 도시 계획을 자신의 주요 영역으로 생각했다.[1] 그는 1964년에 그의 첫 번째 국제적인 상을 받았고, 그리고 나서 그의 건축가 사무실을 열었다. 그는 사우디아라비아에서도 일했다.[2]1977년 라인란트팔츠주 카이저슬라우테른 대학교의 도시계획 교수가 되었다. 그의 회사는 2001년부터 상하이에 사무실을 가지고 있다.
구드룬 힘러와 에다 괴링과 같은 나치 관료들의 다른 자녀들과 마찬가지로 슈페어는 아버지의 악명에 대한 주제에 접근해야 했다. 부르비츠가 아버지의 모습을 되찾기 위해 노력했고 괴링은 이에 대해 말하는 것을 피하기 위해 최선을 다했지만, 슈페어는 "자신을 아버지로부터 떼어놓기 위해 평생 노력했다"고 말했다. 그는 부모의 잘못을 인정한 몇 안 되는 나치 지도자의 자녀 중 한 명으로 인정받고 있다.[3] 슈페어는 어린 시절 그의 아버지가 "당신의 숙제를 검토하는 그런 아버지가 아니었다"며 부주의와 가벼운 태만을 언급했지만, 히틀러는 "나의 유치한 관점에서 볼 때 좋은 삼촌이었다"고 말했다." 그는 그의 아버지를 미워하지 않았고 그를 "오늘날 사람들이 생각하는 것보다 훨씬 더 현대적인, 훌륭한 건축가"라고 생각했다고 말했다.[4]