В сентябре 1806 года «Санкт-Петербургские ведомости» вызывали подрядчиков «на постройку в Таганроге тюремного замка на 70 человек и дома градоначальника за 63 150 руб. и таможенного дома за 20 455 руб.». Барон жил тогда за городом, в доме, который был «ветх, сыр и холоден, и для жилья вовсе непригоден». Составленную на месте инженер-поручиком Росинским смету в столице сильно урезали. Вместо каменного дома (ныне Александровского дворца?), запроектированного французом Дюпюи де ля Рей (Dupuis de la Raye), барон в следующем году предпочел купить небольшой деревянный. В 1808 году Дюпюи был выслан из России как французский подданный.
К 1807 году в Таганроге заложили: таможню, биржу, тюрьму, из дерева построили гарнизонные казармы с госпиталем, гимназию, важню и намечалось возвести из камня здания почты и полиции. Проект коммерческой гимназии был сочинен в Харьковском университете, а флигеля спроектировал приглашенный из Новочеркасска «искусный французский архитектор Лавопьер (Lavaupierre)», в истории русской архитектуры неизвестен. Варваци подарил гимназии собрание русских классиков и иностранных авторов15.
Благоустройство Таганрога было стимулировано его бурным развитием. В 1803 году в порту побывало 200, через три года – 975, в 1807 – уже 1902 судна. Кампенгаузен писал: «Коммерция Таганрогская, будучи из знатнейших и выгоднейших для России, приносит при том более половины пошлинного дохода, нежели все прочие черноморские порты…». Город стал быстро богатеть. В 1806 году в нем насчитывалось 7650 жителей и 1689 построек разного рода, из них 95 каменных и мазанковых, тогда как годом позже последних имелось уже 222, т. е. стало больше в два с половиной раза.
Энергичный Кампенгаузен постоянно заботился о застройке Таганрога и 24 марта 1808 года послал министру князю А.Б. Куракину новую записку: «В 1806 году предместник Вашего сиятельства препроводил ко мне нарочитое число образцовых планов и фасадов, сочиненных здешними (петербургскими. – В. А.) архитекторами, чтобы я старался для лучшего обстроения Таганрога склонить тамошних обывателей <…>. Они в весьма хорошем вкусе прожектированы, но для нового города, каков Таганрог, в коем притом материалы и рабочие люди чрезвычайно дороги, слишком великолепны…». Читай – дороговаты.
Барон поэтому попросил столичных архитекторов «начертить несколько образцовых фасадов деревянных и каменных домов: в 4, 5, 6, 8 и 10 саженей длины и не слишком высоких, наподобие тех, кои находятся на Петербургской и Выборгской стороне и других отдаленных местах Петербурга».
