Работая начальником СД и полиции безопасности, Кальтенбруннер не лишь лично руководил всеми операциями гестапо, а и полностью наблюдал за созданием и работой всех концентрационных лагерей. Кроме того ему был доверен и административный аппарат, который производил осуществление подписанных в начале осени 1935 года нюрнбергских расистских принципов, согласно которым приводилось в исполнение так называемое завершающее решение иудейского вопроса.
Согласно свидетельствам современников, Кальтенбруннера мало увлекали профессиональные подробности деятельности аппарата, которым он руководил. В соответствии с имеющимися сведениями, для этого человека основным являлось то, что заведование внутренней и внешней разведкой предоставляло ему возможность управлять существенными политическими событиями. Причем, орудие, требующееся для этих целей, было в его управлении.
Как вспоминали сотрудники службы безопасности (главный орган разведки и контрразведки Третьего рейха) кроме должностных обязанностей, Кальтенбруннера весьма интересовала, его собственная внешность. Этот человек напоминал исполина, с медленной поступью. Он обладал широкими плечами, большущими руками, огромным квадратным подбородком и «затылком как у буйвола». На щеке имелся широкий шрам, который появился у него еще в неспокойный студенческий период. Он представлял собой весьма психически неустойчивую, лицемерную и сумасбродную личность. Кроме того он весьма злоупотреблял алкогольными напитками.
Особый интерес у Кальтенбруннера вызывали различные способы смертной казни, которые производились в концлагерях, и, в частности, функционирование газовых камер. После того как он был назначен руководителем Главного имперского управления безопасности, которому подчинялась система террора и розыска в Третьем рейхе, начали внедрять еще более жестокие методы. При этом изо всех сил начали применять методы массового уничтожения людей.
Как выяснилось, каждый день во главе с Кальтенбруннером проходили заседания, где подробно разбирались усовершенствованные способы пыток и смертных казней в концлагерях. Под его личным контролем высший карательный террористический аппарат, по непосредственному приказу фюрера, осуществляло арест ни в чем неповинных людей, которые потом были замучены до смерти в концлагерях.