Jego kariera zaczęła się w 1933 roku, gdy jako 28-latek został architektem führera. Jego pierwszym wielkim zadaniem był projekt przestrzeni na zjazd NSDAP w Norymberdze w 1934 roku. Zyskał nim nie tylko uznanie, ale i przyjaźń Hitlera.
Trzy lata później został mianowany przez niego generalnym inspektorem budowy nowej stolicy Rzeszy – Germanii. Głównym budynkiem nowego centrum miała być wielka hala zgromadzeń, naśladująca rzymski Panteon, z kopułą o wysokości 300 metrów. Ale że Germania miała powstać w miejscu Berlina, trzeba było najpierw wysiedlić około stu tysięcy Żydów i wyburzyć ich mieszkania.