Дмитрий Иванович Хвостов был женат на Аграфене Ивановне Горчаковой, племяннице Александра Васильевича Суворова. Великий полководец ценил доброту поэта и относился к нему с удивительной теплотой. Свои последние дни Суворов встретил в доме графа Хвостова на Никольской набережной. Согласно легенде, которую с большим удовольствием пересказывали друг другу современники знаменитого графомана, перед смертью Суворов попросил поэта больше стихов не писать. После Хвостова спросили, что говорил ему умирающий, "Бредил" - ответил он.