Херман IV се жени на 10 януари 1634 г. във [[Валдек]] за графиня [[София Юлиана фон Валдек-Вилдунген]] (* 1 април 1607; † 15 септември 1637), дъщеря на граф [[Кристиан (Валдек)|Кристиан фон Валдек-Вилдунген]] (1585 – 1637) и съпругата му графиня [[Елизабет фон Насау-Зиген]] (1584 – 1661), дъщеря на граф [[Йохан VII (Насау-Зиген)|Йохан VII фон Насау-Зиген]] (1561 – 1623) и графиня [[Магдалена фон Валдек|Магдалена фон Валдек-Вилдунген]] (1558 – 1599).<ref>[http://genealogy.euweb.cz/waldeck/waldeck2.html#C ''Waldeck 2''], genealogy.euweb.cz</ref>. <ref>[http://genealogy.euweb.cz/waldeck/waldeck2.html#C ''Waldeck 2''], genealogy.euweb.cz</ref> Те имат две деца, които умират като бебета:<ref>[http://our-royal-titled-noble-and-commoner-ancestors.com/p3177.htm#i95444 ''Hermann, Landgraf von Hessen-Rotenburg''], our-royal-titled-noble-and-commoner-ancestors.com</ref><ref>[http://ww-person.com/cgi-bin/l1/LANG=germ/INDEX=I130360 ''Hermann Landgraf v.Hessen-Rotenburg''], ww-person.com</ref>
* мъртвороден син (*/† 1 декември 1634 в Касел?)
* Юлиана фон Хесен-Касел (* 25 март 1636 в Касел; † 22 май 1636 в Касел)
Херман IV се жени втори път на 2 януари 1642 г. във [[Ваймар]] за принцеса [[Кунигунда Юлиана фон Анхалт-Десау]] (* 17 февруари 1608; † 26 септември 1683), дъщеря на княз [[Йохан Георг I (Анхалт-Десау)|Йохан Георг I фон Анхалт-Десау]] (1567 – 1618) и втората му съпруга [[Доротея фон Пфалц-Зимерн]] (1561 – 1594), дъщеря на [[пфалцграф]] [[Йохан Казимир (Пфалц-Зимерн)|Йохан Казимир фон Зимерн]] (1543 – 1592) и [[Елизабет Саксонска (1552–1590)|Елизабет Саксонска]] (1552 – 1590).<ref>[http://genealogy.euweb.cz/ascania/ascan6.html ''Ascania 6''], genealogy.euweb.cz</ref><ref>[http://geneall.net/de/name/47928/herman-landgraf-von-hessen-rotenburg/ ''Herman, Landgraf von Hessen-Rotenburg''], geneall.net</ref> Бракът е бездетен. Херман и Кунигунда са погребани в манастирската църква в Ротенбург. Наследен е от брат му [[Ернст I (Хесен-Рейнфелс-Ротенбург)|Ернст]].
