Из дома Хабаровы вышли весной 1628 г. Об их пути до Ман-газеи известно немного. Можно только догадываться, что из Верхотурья или из Тобольска они добирались в Мангазею с караваном дощаников, на которых шли мангазейские воеводы Г. И. Кокорев и А. Ф. Палицын. В Тобольске в помощь себе на соболином промысле братья наняли небольшую ватажку из 5 человек. Весьма вероятно, что за использование воеводского транспорта Ерофей и Никифор «работали» в пути «всякое судовое дело».
«Златокипящая государева вотчина» встретила новых воевод колокольным звоном. Население города вышло к воеводам с хлебом и солью. Вместе с толпой прибывших вошли в город и братья Хабаровы. Когда-то, еще в XVI в., на месте Мангазеи уже существовал небольшой промысловый городок. Затем в 1601 г. отряды служилых людей во главе с М. Шаховским, Д. Хрипуновым, В. Масальским и С. Пушкиным на высоком берегу реки Таз построили Мангазейскую крепость, которую обнесли частоколом. В 1607 г. Мангазею окружили рубленой острожной стеной, сгоревшей в 1619 г. В 1625 г. была построена новая крепость. К прибытию Хабаровых она имела форму, близкую к квадрату, со сторонами до 70 м. Стены имели четыре глухие и одну проезжую башни. Такой город можно было обойти по периметру за четверть часа. Самый большой дом внутри городских стен предназначался для воевод. Здесь же рядом находились приказная изба и амбары для государевой соболиной казны, хлебных и соляных запасов. В углу городской стены располагался зелейный погреб с порохом и ядрами для пушек и пищалей.
Но главной достопримечательностью Мангазеи была та ее часть, которая лежала вне городских стен. Это был так называемый посад. На посаде жили служилые люди мангазейского гарнизона и промысловое население. Как показали раскопки Мангазеи, проводившиеся в 1968 г., площадь посада занимала около 10 тыс. м2. Внутри посада было не менее 60–70 домов, в которых проживали как'постоянные, так и временные жители.
В облике Мангазеи братья Хабаровы увидели много общего с родным Устюгом. И это было не случайно. Мангазею строили выходцы с Русского Севера. Дома стояли на высоком подклете. Наличники окон, крылечки украшались богатой резьбой по дереву, напоминавшей кружево. Крытые дворы жилых домов и шатровые звонницы трех мангазейских церквей — Успенской, Василия Мангазейского и Желтоводской представляли образцы знакомой Хабаровым с детства архитектуры. Был в Мангазее и «свой святой» — Василий Мангазейский, поклониться которому приходили паломники из Сибири. Он считался покровителем промысловиков.
