Dne 13. února 1702 se Karel Ludvík ve Štýrském Hradci oženil s hraběnkou Marií Terezií Annou z Trauttmansdorffu (27. února 1676, Štýrský Hradec – 7. ledna 1733, Vídeň), dcerou hraběte Jiřího Zikmunda z Trauttmansdorffu-Weinsberg (1638–1702) a 1702 Cecílie Renata Eleonora z Wildensteinu (1643–1708). [4] Manželé měli děti: [5][6][7]
Marie Anna Antonie z Ditrichštejna-Weichselstadt (10. září 1706, Štýrský Hradec – 7. června 1777, Vídeň), provdaná 14. ledna 1726 ve Vídni za prince Emanuela von Liechtenstein (2./3. února 1700, Vídeň – 15. ledna 1771, Vídeň)
Josef Karel z Ditrichštejna (1708 – 1712)
Gundakar Adam z Ditrichštejna (* 21. února 1710)
Marie Terezie z Ditrichštejna (10. srpna 1713, Štýrský Hradec – 5. listopadu 1749, Biringen), provdaná 19. června 1742 ve Štýrském Hradci za hraběte Kristiána Augusta z Atemsu (21. ledna 1719, Eichstätt, Bavorsko – 18. března, 1764, Gortz)
František Josef Ludvík Kajetán z Ditrichštejna-Hollenburg (5. září 1715 – 23. července 1765), ženatý s Marií Annou Laurou Collalto a San Salvatore (* 23. října 1723)
Constantin von Wurzbach: Dietrichstein, die Grafen und Fürsten von, Wappen. In: Biographisches Lexikon des Kaiserthums Oesterreich. 3. Theil. Verlag der typogr. - literární. - umělec. Anstalt (L. C. Zamarski, C. Dittmarsch & Comp.), Wien 1858, S. 299 f.
Genealogisches Handbuch des Adels, Gräfliche Häuser. 1973 466
Wilczek, Wappen und Ahnentafeln, Wien, 1983, Wilczek, F. , von Häussler, F. J. v. Halem, H. 106
Jiří Louda a Michael MacLagan, Lines of Succession: Heraldry of the Royal Families of Europe, 2nd edition (London, UK: Little, Brown and Company, 1999), tabulka 55.