В 1808 году к Казарскому приехал двоюродный брат отца и крестный Александра надводный советник Василий Семенович Казарский, недавно назначенный на чиновничью должность в интендантском управлении Черноморского флота. Надворный советник согласно табелю о рангах соответствовал подполковнику. Чин не столь уже велик, но в черноморских кругах все же заметный. Дядя предложил отвезти двоюродного племянника в Николаев и определить в Черноморское штурманское училище.
На прощание Иван Кузьмич якобы сказал сыну: «Честное имя, Саша, — это единственное, что оставлю тебе в наследство». Первый биограф А.И. Казарского капитан-лейтенант Иван Николаевич Сущев, побывавший в Дубровно в 40-х годах прошлого века, со слов очевидцев записал подробности этой сцены, в частности, признание И.К. Казарского, что честное имя — единственное достояние, которое он оставляет в наследство сыну. Помимо этого в завещании отца фигурировало еще старое охотничье ружье. Много лет спустя, заполняя очередной «формулярный список о службе и достоинствах», флигель-адъютант и кавалер гвардейского экипажа капитан 1-го ранга А.И. Казарский в графе «имеет ли за собою, за родителями или, когда женат, за женою недвижимое имение», напишет: «Не имею».
Занятия проводили весьма опытные и грамотные преподаватели Латышев, Жданов, Дружинин. Лука Андреевич Латышев, к примеру, участвовал во взятии Корфу и многих других плаваниях и сражениях.
30 августа 1813 года волонтер Александр Казарский был записан в Черноморский флот гардемарином. А еще через год в одном из местных греческих трактиров однокашники отмечали свое производство в первый офицерский чин. В каюткомпании бригантин «Десна» и «Клеопатра», на которых мичман Казарский плавал после окончания училища, хорошо помнят веселого, стройного и красивого мичмана. Надеясь найти живое дело в пограничной службе, Казарский подал рапорт о переводе на Дунайскую флотилию, после чего и был назначен в Измаил командиром отряда канонерских лодок.
Перед отъездом в Измаил Казарский испросил отпуск, который провел на родине в Дубровно. Отца и младшей сестры Матрены к этому времени уже не было в живых, а сам дом был разграблен. Сохранились свидетельства, что во время французской оккупации Матрена бросилась в Днепр, спасаясь от насильников. Мать Татьяна Гавриловна, похоронив мужа и дочь, уехала к своим родственникам в Малороссию. Не сложилась судьба и еще у одной сестры Казарского — Екатерины, которая вышла замуж за обманувшего ее пехотного поручика-двоеженца. Когда обман раскрылся, Екатерина с горя постриглась в монахини. Устроить свою жизнь смогла лишь старшая сестра Прасковья, которая вышла замуж за помещика средней руки и вполне счастливо жила недалеко от Орла. Посетив отеческое пепелище, Казарский уже больше никогда туда не возвращался.
