У шлюбе з Аглаідай Пятроўнай Завадоўскай (1799—1844), дачкой першага міністра народнай асветы Расійскай імперыі графа Пятра Васільевіча Завадоўскага і Верай Мікалаеўнай Апраксінай, адной з першых прыгажунь свайго часу. У шлюбе была адзіная дачка Марыя (1840—1907), якая стала жонкай маршалка шляхты Суражскага павета Івана Сцяпанавіча Лістоўскага (1831—1912). Аглаіда пахавана на Машэкаўскіх могілках у Магілёве.
Пяру Лістоўскага належыць біяграфія П. В. Завадоўскага, апублікаваная ў часопісе «Рускі архіў» у 1883 годзе. У Лістоўскіх было два сыны і дзве дочкі. Большую частку часу сям’я пражывала ў сяле Ушчэрп’е Суражскага павета, якое дасталася ў спадчыну Марыі Феліксаўне. Сын Лістоўскіх, Сяргей Іванавіч (1875—1922 гг.), вядомы тым, што заснаваў ва Ушчэрп’і абшчыну паслядоўнікаў Л. М. Талстога.