Когда Авраамий поселился близ Ростова, там целый конец Чудский поклонялся каменному идолу Белеса.
В том идоле «сосредотачивалась вся сила и все обольщение демонское». Сходен он образу демона Ваала из ведийской мифологии — пожирателя скота. Долго, вплоть до XIX века, сохранялась в Ростове поговорка: «Зол как Велес».
Идол был из дуба, на большом каменном подножии. Внутри идола — лестница, по которой жрец входил в пустую его голову и жег там разные смолистые вещества, отчего изо рта, ушей и глаз шел дым. На дымовуху сбегался народ и кланялся. Идол этот пользоваться популярностью и среди славянского населения.
«Со скорбью смотрел Преподобный Авраамий на то, как некоторые ростовцы пребывают еще в идольском соблазне. Со слезами молил он Бога дать ему силу и благодать Святого Духа на разорение злокозненного идола. Получив откровение о том, что для его свержения требуется идти в Царьград, в дом св. ап. Иоанна Богослова, отправился он в путь, который был чудесно сокращен, поскольку сам апостол явился Авраамию на берегу реки Ишни, пересекающей дорогу из Ростова при своем впадении в озеро Неро. При встрече св. апостол Иоанн благословил преподобного и дал ему не какое-либо тяжелое орудие, но легкую камышовую трость и велел без боязни вооружиться на идола Велеса».
Авраамий, вооруженный тростью Богослова и крестным знамением, сокрушил истукана, «и абие идол Велес в прах бысть». На месте разрушенного идола преподобный построил храм, в котором ростовчане «крестились от мала и до велика».
С того времени просвещенные светом Христовым, обращаясь к Преподобному, воспевают его в сердцах словами кондака:
«Иго Христово прием Авраамие, и Того крест на рамо взем, последовал еси Ему, насажден быв в дому Господни, и процвел еси яко финике, и яко кедр иже в Ливане, умножил еси чада твоя, муж желаний духовных: от возлюбленнаго же Апостола Иоанна Богослова благодать восприм, жезлом сокрушил еси идола, и разсыпал еси его яко прах, и чудотворец убо велий явился еси преподобие, темже Христа Бога моли непрестанно о всех нас».
«Тросточка камышовая» долго хранилась в здешней церкви, пока Иван Грозный не позаимствовал — взял с собой Казанский Кремль ломать. Так и не вернул. Хотя бочки с порохом оказались эффективнее.
Первый и единственный в то время в Ростовском крае монастырь, расположенный на месте прежнего любимого и чтимого народом Велесова капища, встретил со стороны язычников озлобление и ненависть. Ростовцы не раз намеревались разорить и сжечь обитель и только молитвы основателя и насельников монастыря, да благодать Божия сохраняли обитель в безопасности.
