А.Н. Голицын вновь попытался прийти другу на помощь. Он освободил журнал от духовной цензуры и заявил, что сам будет его цензором. Но, как и 12 лет назад, это не помогло. По поручению Фотия «московский затворник Смирнов» сделал критический обзор журнала. До сих пор неизвестно, не вымышленный ли это персонаж? Есть серьезные основания подозревать, что под именем московского затворника скрывался ректор Петербургской духовной семинарии архимандрит Иннокентий Смирнов, противник «Сионского вестника» и покровитель Фотия. Ирония судьбы – Лабзин всю жизнь обожал мистифицировать других, и теперь сам пал жертвой мистификации.
Обзор направляется к князю С.А. ШиринскомуШихматову, тот поручает некоему А. Струдзе оформить полноценный донос в Синод. Струдза, добавив к обзору набор стандартных обвинений, подает бумагу в Синод и Голицыну как министру просвещения. Игнорировать донос не получилось, Ширинский-Шихматов доложил об этом царю. Голицын вынужден был «дать делу законный ход». Лабзину предложили изменить направление журнала и во всем слушаться «благодетельных советов духовной цензуры». В вопросах веры и своего духовного кредо Лабзин никогда не шел на компромиссы. Он отказался, и в конце 1818 года журнал закрыли.
Травля Лабзина набирала силу. Его главный ненавистник Фотий публично называл его не иначе как «идол-человек» и «пророк сатанин». От Лабзина отвернулись многие прежние знакомые.
Александр Федорович тяжело переживал все эти события. Его не обрадовало даже «утешительное» назначение на должность вице-президента Академии художеств. Главное дело его жизни – издательство книг ему продолжать не давали. За четыре года, прошедшие с момента закрытия «Сионского вестника» до своей отставки, он издал всего лишь одну книгу. Лабзин заболел «падучей» (эпилепсией), изнуряющие припадки отравляли ему жизнь и лишали главного наслаждения – работать за письменным столом. Характер Лабзина, и прежде нелегкий, испортился еще более. Порой он не мог себя контролировать и говорил такие вещи, в которых потом раскаивался. Одна из таких неосторожных фраз стала роковой.
13 сентября 1822 года на заседании руководства Академией слушался вопрос об избрании в почетные члены Академии графа Гурьева и графа Кочубея. Лабзин резко возражал на том основании, что эти господа ничего для искусства не сделали. Услышав, что зато они близки к государю, Лабзин сардонически расхохотался и заявил, что в таком случае он предлагает избрать почетным академиком царского кучера Илью Байкова, который к государю ближе всех, ибо его спину (Лабзин выразился по народному) государь созерцает каждый день.
