Il se remarie à Cobourg, le avec Suzanne Élisabeth Kempinsky; qui est créée en 1689 Comtesse Kempinsky de Schwisitz et Altenhofen. Ils n'ont pas d'enfants.
Albert meurt sans descendance en 1699, entraînant une querelle de succession entre ses frères. Cobourg revient finalement au benjamin Jean-Ernest.