Филип IV се жени на 22 август 1538 г. в [[Хайлигенберг]] за [[Елеонора фон Фюрстенберг]] (* 11 октомври 1523; † 23 юни 1544), дъщеря на граф Фридрих III фон [[Дом Фюрстенберг|Фюрстенберг]]. Те имат децата:
* Амалия (1540)
* [[Филип V (Ханау-Лихтенберг)|Филип V]] (1541–15991541 – 1599), граф на Ханау-Лихтенберг (1590–15991590 – 1599), женен 1560 г. за пфалцграфиня Лудовика Маргарета фон [[Графство Цвайбрюкен-Бич|Цвайбрюкен-Бич]] (1540–15691540 – 1569), през 1572 г. за графиня Катарина фон [[Графство Вид|Вид]] (1552–15841552 – 1584) и 1586 г. за шенкин Агата цу Лимпург-Оберзонтхайм (1561–1623)1561 – 1623)
* [[Анна Сибила фон Ханау-Лихтенберг|Анна Сибила]] (1542–16121542 – 1612), омъжена 1562 г. за граф Лудвиг фон Флекенщайн-Дагщул (1542–1577)1542 – 1577)
* [[Йохана фон Ханау-Лихтенберг (1543–1599)|Йохана]] (1543–15991543 – 1599), омъжена 1563 г. за Волфганг фон [[Изенбург|Изенбург-Бюдинген-Ронебург]] (1533–15971533 – 1597), разведена 1573
* Елеонора (1544–15851544 – 1585), омъжена на 24 февруари 1566 г. за [[Албрехт фон [[Хоенлое-Валденбург]]-Вайкерсхайм-Лангенбург (1543–15751543 – 1575). Бракът е бездетен.
