Начавшаяся стройка полностью захватила Воронихина, отнимая у него все время и энергию. Сооружение Казанского собора стало делом всей его жизни.
К этому времени происходит перемена в личной жизни архитектора. В 1801 году он женится. Его женой стала Мария Федоровна Лонд — англичанка, служившая гувернанткой в доме Строгановых. Молодожены покидают Строгановых и переезжают в собственную квартиру, которая находилась при строительстве Казанского собора.
Семейная жизнь Воронихина протекала счастливо. Но это, пожалуй, и все, что о ней можно сказать. Например, ничего неизвестно о взаимоотношениях в семье, о материальных затруднениях (а они, вероятно, были), о том, как воспитывались дети — шесть сыновей: Александр (1805–1835), Павел (1806–1836), Владимир (1808–1828), Константин (1810–1869). Двое сыновей умерли в детстве, остальные, за исключением Константина, тоже прожили очень немного. Дети Воронихина не оставили после себя потомства.
Очень мало конкретного известно нам о духовной жизни зодчего — его политических устремлениях, интересах, взглядах, пристрастиях. В мемуарах тех лет обо всем этом почти не говорится. Но современники отмечают, что по своему характеру Воронихин был человеком замкнутым, напряженно-сосредоточенным на своей работе, семье, что он никогда не искал многолюдного общества, ограничивая свои привязанности кругом близких ему людей.
Он был лишен корыстолюбия и честолюбия. Никто из современников не говорит о его желании выделиться или занять выгодное место.
Выходец из самой гущи народной, Воронихин хорошо понимал, как тяжела дорога талантливого человека, особенно крепостного. Известно, что он поддерживал материально молодых талантливых архитекторов. Среди них были крепостные И. Ф. Колодин, П. С. Садовников и другие.
Архитектор бережно относился и к своим родственникам. Став свободным и знаменитым человеком, он не порывал с ними связей. Так, Воронихин помог получить художественное образование своему племяннику Алексею, сыну брата Ильи, работавшему впоследствии модельмейстером на государственном фарфоровом заводе.
Отношение Воронихина к людям всегда было доброжелательным. Автор уже упоминавшейся «Некрологии» пишет, что «кротость нрава, трудолюбие и семейные добродетели доставили ему уважение и любовь почти всех». Другие отмечают его «кротость, ласковость, скромность, нежность, но одновременно и силу характера». О доброте, честности, порядочности архитектора говорил и Жильбер Ромм.
