Казармы Розау были построеныво второй половине XIX века. Вступивший на трон после Австрийской революции Франц Иосиф I хотел обезопасить себя и своих подданных в случае народных волнений. Революция, произошедшая в Австрии в 1848-м году, была подавлена, но стала ключевым моментом в развитии столицы. Крепостная стена, окружавшая Вену столетиями, показала свою бесполезность перед современным оружием. По высочайшему велению императора ее решено было снести. Освободившееся пространство в случае атаки на Вену планировали использовать как поле для стрельбы. Но история распорядилась иначе. В 1859-м году императорские войска терпят очередное поражение от французов и итальянцев в бою под Солферино, Австро-Венгрия теряет королевство Ломбардию и окончательно доказывает свою несостоятельность как военное государство.
Франц Иосиф решает на месте вековой стены проложить бульвар по примеру парижских Елисейских полей и берлинской аллеи Унтер-ден-Линден. Если не блестящие военные победы, то искусство и наука должны прославлять династию Габсбургов. Однако по обе стороны от протянувшегося на четыре с половиной километра бульвара возводят и защитные сооружения.
Казармы были построены в 60-х годах XIX века, когда необходимость в них уже отпала. Но неподалеку, за Дунайским каналом, находился экономически важный Северный вокзал, откуда уходили поезда в Прагу. Позже поблизости построили и второй вокзал, до сих пор носящий имя императора. В случае необходимости войска могли быть в один момент переброшены для защиты железнодорожных путей и поездов с товарами.
Вместе с архитектором Теофилем Хансеном над проектом казарм работали верховные военные чины Австро-Венгерской Империи. Все должно было быть продумано до мелочей. Башни казарм напоминают средневековые бастионы, которых так много сохранилось в северной Италии. Например, крепости Мантуя, Верона, Линьяно, когда-то принадлежавшие австрийцам. Именно крепость в Вероне, выдержанную в красно-белых тонах, архитектор берет за образец. Защитные сооружения вмещали ни много ни мало 4 тысячи солдат и почти четыре сотни лошадей императорской армии. Ходил анекдот, что архитектор, забыв построить туалеты, застрелился. Он не то, чтобы про них совсем забыл. Первоначально солдатские туалеты имелись лишь в двух угловых башнях, впоследствии были выстроены и дополнительные удобства.
Ныне в "романтическом замке" находятся Министерство обороны Австрии, отделы федеральной полиции, отряд молниеносного реагирования "Кобра" и небольшая выставка оружия.