Для устранения нежелательных для него лиц, случалось, не брезговал Воронцов самыми недостойными способами, как, например, в скандальной истории 1828 года с Александром Раевским. Справедливости ради отметим, что он имел моральное право добиваться удаления молодого Раевского из Одессы после его безрассудной выходки (это признавал и отец потерпевшего), но способ, который был избран генерал-губернатором, вызвал справедливое возмущение Н. Н. Раевского-старшего и получил должную оценку в его письме младшему сыну Николаю: «Гр. Воронцов, желая отдалить из Одессы твоего полусумасшедшего брата, нашел благоразумный способ сыскать на него доносчика, будто он вольно говорит о правительстве и военных действиях! Ты знаешь, мой друг Николушка, может ли быть; эти все дурачества влюбленного человека он действительно делал, но предосудительного, — с его чувствами не сходно. И, думая скрыть свое действие, извещает меня о том, что по повелении Государя велено ему ехать в Полтаву, впредь до рассмотрения, уверяя при том, что он сему не причиной, что он сему не верил, но справлялся и действительно нашел, что донесение на него справедливо. Я писал Государю истину <...> что клеветник есть граф Воронцов…»44
Замечательно выразительную характеристику Воронцова оставил другой современник, знавший его по Одессе: «Чем ненавистнее был ему человек, тем приветливее обходился он с ним; чем глубже вырывалась им яма, в которую готовился он пихнуть своего недоброхота, тем дружелюбнее жал он его руку в своей. Тонко рассчитанный и издалека заготовляемый удар падал всегда на голову жертвы в ту минуту, когда она менее всего ожидала такового»45.