Dieser Artikel oder nachfolgende Abschnitt ist nicht hinreichend mit Belegen (beispielsweise Einzelnachweisen) ausgestattet. Angaben ohne ausreichenden Beleg könnten demnächst entfernt werden. Bitte hilf Wikipedia, indem du die Angaben recherchierst und gute Belege einfügst.
Einige Kinder waren geistig oder körperlich behindert. Dies ergab sich durch die nahe Verwandtschaft zwischen Herzog Robert und Maria Pia, die Cousin und Cousine zweiten Grades waren. Aus der Ehe gingen zwölf Kinder hervor:
Herzogin Maria Pia starb am 29. September 1882 im Alter von 33 Jahren in Biarritz, eine Woche nach der Geburt ihres letzten Kindes. Herzog Robert heiratete 1884 in zweiter Ehe Maria Antonia von Portugal. Sein bekanntestes Kind aus dieser zweiten Ehe war die spätere Kaiserin Zita von Österreich.