Сложность положения Хауссера заключалась в том, что сама по себе должность инспектора не подразумевала наличия у него командных функций — тот же Теодор Эйке, кроме поста инспектора концлагерей, получил еще и пост командира караульных соединений СС. Инспектор отвечал за организацию учебного процесса, боевую подготовку, имел определенное влияние в вопросе снабжений (но непосредственно этим не занимался) и подбора командных кадров. В его компетенции были и вопросы разработки тактики ведения боя, новых форм — так, например, именно Хауссер начал комплектовать личный состав частей усиления СС камуфлированной униформой. Верный своему рейхсверовскому опыту, Хауссер фактически начал создавать под своим руководством штаб дивизии, но прав командира всех частей усиления он не получил. Кроме того, не мог на первом этапе в полной мере осуществлять и свои инспекторские обязанности. Проблема была в том, что командир наиболее старого и заслуженного формирования частей усиления — «Лейбштандарта СС Адольф Гитлер» — Зепп Дитрих активно сопротивлялся тому, чтобы его часть инспектировали. Надо заметить также, что на тот момент Хауссер был только бригадефюрером СС, а Зепп еще 1 июля 1934 года получил чин обергруппенфюрера СС (то есть полного генерала) и был, таким образом, на два звания старше Хауссера. И это не говоря уже о том, что политическое влияние Дитриха и его близость к фюреру ставили Хауссера в совсем безнадежное положение. Впрочем, положение не было настолько уж бесперспективным: у Хауссера был могучий союзник, которого сильно раздражала самостоятельность Дитриха. Этим союзником был рейхсфюрер СС. «Дорогой Зепп, — писал Гиммлер командиру «Лейбштандарта», — опять происходит что-то непонятное. Твой Лейбштандарт представляет собой оторванную от всех организацию, в которой творится нечто невообразимое, а на приказы сверху не обращает никакого внимания». Но пока Гитлер лично благоволил Дитриху, у Гиммлера ничего не выходило. Лишь в 1937—1938 годах Зепп постепенно стал утрачивать часть своих полномочий: во-первых, Гитлер увлекся другими делами и у него появились новые фавориты, а во-вторых, даже Зепп понял, что его «ребята» начинают проигрывать перед лицом отлично подготовленных солдат Хауссера. Постепенно Дитрих согласился с тем, что Хауссер стал проводить инспектирование его части, а затем даже пошел на то, чтобы на ряд командных постов в «Лейбштандарте» были поставлены офицеры из других частей усиления. Это дало возможность начать укреплять в «Лейбштандарте» дисциплину, и процесс по превращению его из парадной части в боевую пошел ускоренными темпами.

Постоянно мешал Хауссеру и Феликс Штейнер с его идеями штурмовых войск. Хауссер создавал элитную, фактически гвардейскую часть, а Штейнер пытался превратить части усиления СС в своего рода ядро армии нового типа. Отставной генерал рейхсвера этому противился как мог, но встретил непонимание со стороны Гиммлера, который неожиданно оказал поддержку Штейнеру. Интересно другое: и Хауссер, и Штейнер упорно и подспудно проводили политику выведения частей усиления СС из-под контроля рейхсфюрера СС, и тот и другой стремились к передаче частей фактически в состав вермахта. Выступая 23 января 1939 года в Берлине перед высшим руководством СС, Хауссер заявил: «Части усиления СС — единственная часть Охранных отрядов, которые наряду с исполнением указаний рейхсфюрера СС в соответствии с приказами фюрера должны подчиняться и Верховному командованию сухопутных войск». Создавая части усиления СС, и Гитлер, и Гиммлер хотели получить в свое распоряжение внутреннюю армию. «Они предназначаются для решения внутриполитических задач, которые будут мною ставиться перед рейхсфюрером СС», — заявил Гитлер. Можно констатировать, что этот их план полностью провалился: во-первых, до начала войны организация частей усиления СС не была полностью завершена, но главное, во-вторых, оказалось, что действия нацистов не вызвали в Германии мощного противодействия, для подавления которого возникала бы необходимость в использовании этих «внутренних войск» Третьего рейха.