Il 13 aprile 1776 acquistò lo storico palazzo di Castel Goffredo appartenuto ai Gonzaga di Mantova (ora Palazzo Gonzaga-Acerbi), che divenne la dimora della famiglia.[4]
Nei suoi poderi si occupò dell'allevamento del baco da seta e costruì, attiguo al suo palazzo, una filanda ed un filatoio approvati dal governo austriaco.[5]
Discendenza
Giacomo Acerbi ebbe da Marianna Riva:
Giuseppe (1773 – 1846), esploratore, letterato, console generale in Egitto nel 1826 e primo uomo nella storia ad aver raggiunto Capo Nord via terra;