Il s'est marié deux fois, d'abord à Diane de Cossé et, deuxièmement, à Marie-Christine d'Egmond, qui mourut en 1622.
Elle avait, de son second mariage, un fils, Alexandre de Bournonville, duc de Bournonville, comte d'Hénin-Liétard (14 septembre 1585, Bruxelles, décédé le 21 mars 1656), et, probablement avec Mansfeld, un second fils, Antoine III de Lalaing (né entre 1588 et 1590 et mort le 26 septembre 1613), comte de Hoogstraeten, qui a épousé Marie-Marguerite de Berlaymont, fille de Claude Berlaymont, aussi connu comme Haultpenne.
Les frères et sœurs
Du premier mariage de son père, le 1er avril 1542 avec Marguerite van Brederode (*ca 1520, morte le 31 mai 1554);
Frédéric, *1542, mort 1559
Polyxene, morte après le 17 septembre 1591 ; mariée à Palamède de Nassau-Chalon (+1600)
Du second mariage de son père, le 22 février 1562 avec Marie de Montmorency (morte le 5 février 1570)
