Успехи Шпеера, которому еще не было и тридцати, привлекли внимание Гитлера. Вслед за вниманием посыпались должности и заказы. Фюрер, будучи сам несостоявшимся архитектором, видел в Шпеере воплощение собственных юношеских мечтаний. Он приблизил к себе способного архитектора, назначил его руководителем отдела Германского трудового фронта и ввел в штаб своего заместителя. В 1937 Шпеер стал Главным инспектором рейха по архитектуре, получив задание "вновь сделать Берлин настоящей и истинной столицей Германского рейха". Воплощая грандиозные замыслы Гитлера, Шпеер неутомимо работал: проектировал государственные учреждения, стадионы, дворцы, монументы и целые сверхгорода для будущей Великой Германии. Шпеер открыто выражал восхищение идеями своего патрона, которые другие архитекторы называли "безумной сентиментальностью", годной для прошлого века. Несостоявшийся студент Академии художеств, Гитлер часами стоял прикованный к наброскам и макетам Шпеера. В 1938 он вручил ему Золотой партийный значок.
Шпеер продолжал свою работу и после начала 2-й мировой войны. В 1941 он был избран депутатом рейхстага. В следующем году его назначили на важный пост в министерство вооружения и военной промышленности вместо погибшего в авиационной катастрофе Фрица Тодта. С этого момента Шпеер полностью переключился с архитектуры на военную промышленность. Он также занимал множество других важных постов: член центральной плановой комиссии, Генеральный инспектор водных ресурсов и энергетики, директор организации Тодта, руководитель Национал-социалистического корпуса водителей и начальник главного партийного технологического управления. Некоторое время он считался вторым наиболее важным человеком в Третьем рейхе и безусловным диктатором германской военной промышленности. Он достигал необыкновенных производственных результатов, несмотря на противодействие со стороны других нацистских руководителей и невзирая на тяжелые потери от бомбежек союзников. Шпеер косвенно был осведомлен о готовящемся покушении на Гитлера, но никогда не был тесно связан с Июльским заговором 1944. В последние недели войны он оказал сопротивление приказам Гитлера проводить политику "выжженной земли", сеять хаос и разрушения, лишь только потому, что германский народ оказался недостойным гения своего фюрера.
Представ перед Международным военным трибуналом в Нюрнберге в 1946, Шпеер оказался единственным из обвиняемых, признавшим свою вину за преступления Третьего рейха. "Этот суд необходим, - заявил он. - В авторитарной системе за такие ужасные преступления все несут общую ответственность". Любопытны его признания: "Мне кажется, что если бы у Гитлера мог когда-либо быть друг, этим другом был бы я". В своих показаниях Шпеер утверждал, что его деятельность была "технологической и экономической", а не политической, что он был лишь архитектором, и все, что ему было известно о происходящем, это то, что он мог прочитать в газетах. Он признавал, что отвергал жестокость не в силу гуманности, а с практической точки зрения, поскольку излишняя жестокость была бы помехой в его усилиях увеличить производство. Трибунал ограничился тем, что признал "соучастие" Шпеера в программе использования подневольного труда: "В качестве смягчающего обстоятельства, следует признать то, что ... на заключительных этапах войны он был одним из немногих, кто имел смелость сказать Гитлеру, что война проиграна и нужно сделать шаги по предотвращению бессмысленных разрушений промышленных предприятий". Шпеер был признан виновным по пункту 3 (военные преступления) и пункту 4 (преступления против человечности). 1 октября 1946 он был приговорен к 20 годам заключения в берлинской тюрьме Шпандау. Освободился в 1966.
В 1970 Шпеер опубликовал книгу "Внутри Третьего рейха", которая получила всемирную известность. Первые наброски он сделал еще находясь в Шпандау, тайно вынося по кусочку, и затем собрал материал в книгу. Эту книгу признали самыми выдающимися политическими мемуарами всех времен. Книга демонстрирует, каким образом неограниченная власть Гитлера смогла сочетаться с новым механизмом, обеспеченным современной технологией. Шпеер пишет, что Третий рейх на самом деле был весьма далек от монолитного тоталитарного государства, а был лишь раздробленным феодальным княжеством, контролируемым местными политиками, такими как циничный министр пропаганды д-р Геббельс, бесцветный шеф CC Гиммлер и глава Люфтваффе Геринг. Каждый отстаивал собственные личные интересы и стремился к собственной выгоде, не заботясь о том, какой ценой дается война. Шпеер настаивал на том, что он лично не принимал участия в тех ужасах, которым способствовала его деятельность. Он признавал, что заключил договор с дьяволом и понял слишком поздно смысл своего договора.
По материалам "Энциклопедии Третьего рейха"
