Воронцовы, графы и княжеский род. Происходит от боярского рода Протасьевичей, ведущего начало от тысяцкого Ивана Калиты. Первым из Воронцовых в Воронежской губернии появился Роман Илларионович (17.07.1707 - 30.11.1783), государственный деятель, граф (1760), генерал-аншеф (1761). Заводчик, из-за необузданного лихоимства получил прозвище Роман - большой карман. Владимирский (1778-1779) Тамбовский (1779-1781) наместник. Проводил размежевание Тамбовских и Воронежских земель. В 1750-е годы приобрел обширные земельные владения у помещиков Добренского уезда Тамбовской провинции (позже Павловского уезда Воронежской губернии), заселил их выходцами с Украины. В 1757 году на реке Осередь основал слободу Воронцовка.

Сын Александр Романович (15.09.1741, город Санкт-Петербург - 04.12.1805, село Андреевское Владимирского уезда Владимирской губернии), граф, государственный деятель, дипломат. Полномочный министр в Англии (1762-1764), Голландии (1764-1768). Президент Коммерц-коллегии, член комиссии о коммерции (1773-1794). Сенатор (1779). Участвовал в заключение важнейших международных договоров России. Государственный канцлер (1802-1804). Содействовал разрыву с Наполеоном и созданию антифранцузской коалиции. Занимался благоустройством слободы Воронцовка. Для строительства церквей и усадьбы приглашал архитектора Н.П. фон Берка. Александр Романович неоднократно бывал в Воронежской губернии, переписывался с наместником В.А. Чертковым. После смерти Александра Романовича имение принадлежало его брату Семёну Романовичу Воронцову.

Следующим владельцем Воронежского имения был Михаил Семёнович (19.05.1782 - 06.11.1856, город Одесса), военачальник, государственный деятель, генерал-фельдмаршал (1856), светлейший князь (1852). Михаил Семенович до 1801 года жил в Англии. Во время Отечественной войны 1812 годы командовал дивизией (1812), русским оккупационным корпусом во Франции (1815-1817). Новороссийский и Бессарабский генерал-губернатор (1823-1844). Наместник на Кавказе, главнокомандующий Отдельным Кавказским корпусом (1844-1854). После смерти сына Михаила Семеновича Семена (23.10.1823 - 06.05.1882), не оставившего потомства, имение перешло его племяннику Петру Андреевичу Шувалову (07.11.1846 - 23.12.1903), получившему право именоваться светлейшим князем Воронцовым, графом Шуваловым.