И тогда Пятницкий решил отправиться в свой родной Вилькомир, надеясь раздобыть там какую-нибудь «липу» и перебраться через границу, воспользовавшись старыми связями с контрабандистами.
«Стали звать за границу из России, — вспоминала об этом времени Н. К. Крупская, — нашего «спеца» по транспортным делам, Пятницкого, теперешнего работника Коминтерна, наладившего в свое время очень хорошо транспорт через германскую границу. Но пока ему удалось уйти из-под слежки, из-под ареста, перебраться через границу, прошло чуть не восемь месяцев».
А как ему удалось уйти из-под ареста в родном благословенном Вилькомире, он не без доли юмора, но, как всегда, лаконично поведал всей семье Ульяновых: Владимиру Ильичу, Надежде Константиновне и Марии Ильиничне за вечерним чаем, в день своего приезда в Женеву.
Арестовали Пятницкого дней десять спустя после приезда в Вилькомир. На рассвете его разбудил сильнейший стук в дверь. На вопрос: кто стучит? — незнакомый голос ответил: «Откройте. Срочная телеграмма». И назвал фамилию шурина Пятницкого. Ворвалась целая банда. Два жандарма, стражники, понятые… Жандарм сразу же: «Ты Иосиф Таршис?» — «Ничего подобного, ошиблись, господин жандарм», — ответил Пятницкий, а сам в это мгновение лихорадочно перебирал возможные варианты. Назваться своим именем нельзя — московская охранка его знает, так что тут каторгой пахнет. Сказал, что он — Покемунский.
После допроса, который вел жандармский офицер, Пятницкого отвезли в Ковно и поместили в общую камеру тюрьмы. И ему сразу же пришлось принять участие в голодовке против строгого режима, установленного в тюрьме.
Из ковенской тюрьмы отправили в Вильно. Там от шурина Пятницкий узнал, что жандармы пока ничего не нашли, а что арестован он по доносу бывшего активного бундовца Береля Грунтвагена. Подержав Пятницкого изрядное время в виленской тюрьме, его вместе с одним ремесленником погнали пешим ходом в неизвестном направлении. На третьи сутки утомительного пути они оказались в городишке Уцянах, через который проходила железнодорожная узкоколейка Паневеж — Свенцяны. Заперли в маленьком покосившемся срубе во дворе дома пристава. Гниль, смрад, сырость, тьма. Сторож, принесший еду, намекнул, что пристав-де наш на руку скор и тяжел. В понедельник вечером вызвал пристав спутника Пятницкого. Принесли избитого, в крови и тут повели к приставу Пятницкого. Он решил защищаться. Привели в просторную светлую комнату. За письменным столом — пристав, мужчина и на самом деле тяжелого веса и с физиономией молодца-разбойничка. А у стены пять незнакомых седобородых стариков. И они в один голос подтвердили, что арестованный и на самом деле Абрам Покемунский, которого все они знают чуть не с пеленок.
