Однако этот период неудачного сотрудничества Азефа с русской политической полицией через Л. Ратаева, до выхода последнего в отставку летом 1905 года, продолжается два года. За это время Азеф «развращается» как сотрудник. Он уклоняется от деловых свиданий, перестаёт давать регулярные сообщения. Департамент полиции начинает понемногу подозревать его, и отношения с ним как бы прерываются. Перерыв не беспокоит особенно сильно Департамент полиции; у последнего появляется новый «верный» и осведомлённый сотрудник в центре Партии социалистов-революционеров в лице Ник. Татарова. Но Татарова скоро выясняют, и эсеры убивают его, как предателя.
С удалением, после убийства 5 февраля 1905 года Великого князя Сергея Александровича, прежних руководителей политического розыска, как Лопухина, Ратаева и некоторых других, неожиданно восходит звезда Рачковского, и он становится каким-то внештатным, но главным руководителем политической полиции[69]. Ратаев передаёт Азефа Рачковскому. Последний посерьёзнее Ратаева, и Азеф начинает снова «добросовестно» работать в интересах политической полиции.
Надо заметить, что до этой перемены Азеф виделся и с самим Лопухиным; последний временно и, конечно, неудачно пытался руководить им; между прочим, отказал Азефу в прибавке жалованья.
В конце 1905 года происходит «шатание» власти, неуверенность в победе той или иной стороны. «Шатается» и Азеф (тогда «зашатались» и другие сотрудники), но власть побеждает, и Азеф решает примкнуть к победившей стороне. Он начинает «писать письма» Рачковскому, но ответа не получает. Рачковский в это время строит планы на сотрудничестве Гапона, а через последнего на активном лидере эсеров — Рутенберге. Дело кончается провалом плана Рачковского.
В Петербурге начальником охранного отделения в конце 1905 года назначается подполковник А.В. Герасимов, руководивший до того политическим розыском в Харькове. Во время наружного наблюдения за террористическими группами в Петербурге подполковник Герасимов узнает от старшего и опытного филера отделения, что в одном из «наблюдаемых» он припоминает важного и ценного секретного сотрудника по кличке «Филипповский». Азеф как-то сидел в кафе Филиппова на Тверской в Москве — отсюда и кличка. Заведующий наружным наблюдением в Московском охранном отделении Евстрат Медников, красочная фигура в политическом розыске империи, показал как-то Азефа этому доверенному и старшему филеру и добавил: «Смотри на него, это человек наш, его надо оберегать от случайностей в арестах!»
