В этих условиях усиливается роль заграничного центра во главе с А. И. Герценом. Революционные силы внутри страны и за границей действуют единым фронтом.
Ничего из происходившего в России и в центре революционной эмиграции не было известно Войноральскому в истинном свете. В газетах события приглушались или замалчивались. Его жизнь протекала медленно, и лишь письма родных и друзей скрашивали его существование. Он много занимался самообразованием, изучал юриспруденцию. Но энергии Войноральского не хватало выхода, вынужденная бездеятельность его сильно травмировала, а все усилия добиться работы были тщетными.
В Глазове Войноральский прожил пять месяцев. Затем властям поступил донос, что он, пользуясь своим знакомством с учителями уездного училища, распространял "вредные идеи своеволия, безначалия и безбожия" и не признавал никакой власти, "кроме своей совести". Полицейская машина сработала, и Войноральский был переведен в августе 1862 г. в город Усть-Сысольск той же губернии. В письме одному из руководителей студенческих волнений Василию Праотцеву Войноральский отметил, что ему даже не сообщили, по какой причине его переводят -- "к людям здесь относятся, как к вещам" а "вещи не должны знать, что с ними делают".
После 9-месячного пребывания в Усть-Сысольске в мае 1863 г. Войноральского выслали еще дальше -- в Яренск Вологодской же губернии, поскольку было установлено, что он продолжает вопреки запрету встречаться с местной интеллигенцией. Яренск -- место еще более суровое. Здешние жители страдали не только от холода, но и от голода.
Войноральский неоднократно обращается к властям с просьбой предоставить ему какую-нибудь работу как бывшему студенту, но его заявления остаются без ответа.
Материальную помощь он имел от родителей, и работа нужна была ему не как средство к существованию: труд был необходимой потребностью его деятельной натуры.
Еще в Усть-Сысольске Войноральский узнал о польском восстании. Оно началось с 22 на 23 января 1863 г., несмотря на все предупреждения об его несвоевременности. Повстанцы напали на местные воинские команды в Варшаве и других городах. В ходе восстания на страницах "Колокола", в листке "Земли и воли" публиковались воззвания к офицерам и солдатам русской армии и другие обличительные материалы. А. Слепцов от имени "Земли и воли" писал: "Вместо того, чтобы позорить себя избиением поляков, обратите меч свой на общего врага нашего -- императорское правительство". Редакция "Колокола" систематически оказывала моральную и денежную помощь восставшим. При поддержке Герцена и Огарева польские эмигранты в Лондоне и Париже в марте 1863 г. разоблачали на страницах журнала реакционную политику царизма. Они организовали экспедицию Лапинского, чтобы отвлечь часть русских войск из Польши высадкой на Балтийское побережье для помощи вспыхнувшему весной 1863 г. массовому крестьянскому движению в Литве. В экспедиции принимал участие М. А. Бакунин. Но организация экспедиции была не на высоте: слишком поздно она была отправлена, а предательство капитана привело к гибели людей и. неудаче всего дела. Шовинистическая пропаганда царизма представила польскую революцию как мятеж, враждебный России. Восстания в Польше и Литве, не поддержанные восстанием русских крестьян, не могли устоять против царских войск.
После разгрома революционного движения в России, организации "Земля и воля", крестьянских выступлений в стране и польского восстания 1863 г. наступил разгул реакции. Были распущены земские учреждения столичной губернии, земства подчинены губернаторам. Студентам запрещалось не только организовывать кружки, но и кассы "вспомоществования". Но даже в этих условиях революционеры не сложили оружия.
Во второй половине 1863 г., когда Войноральский находился в Яренске, в Москве на базе землевольческой группы, сложившейся вокруг Николая Андреевича Ишутина, образовался народнический кружок. В него вошли и несколько товарищей Войноральского по пензенской гимназии -- Н. А. Ишутин, Д. А. Юрасов, М. Н. Загибалов, Д. В. Каракозов, а также другие его земляки. Кружок получил название ишутинского. Ишутинцы затем связались с провинциальными кружками и отдельными революционерами в Саратовской, Нижегородской, Смоленской, Калужской губерниях.
В 1864 г. ишутинцы установили связь с польским подпольем в Москве и вместе с поляками организовали побег из пересыльной тюрьмы и отправку за границу выдающегося польского революционера Ярослава Домбровского, одного из руководителей восстания 1863 г.
В отличие от "Земли и воли" ишутинцы сделали вывод о неспособности крестьянства быть главной движущей силой революции. Революционной интеллигенции ишутинцы отводили роль учителя в политическом просвещении народных, масс. В соответствии с этими взглядами ишутинский кружок действовал в трех направлениях: пропагандистском, просветительском и заговорщическом. В пропаганде социалистических идей ишутинцы следовали программе Чернышевского, изложенной в романе "Что делать?": устраивали ассоциации, артели (переплетную, швейную и др.).
В середине 1865 г. в Москву к Ишутину приезжает И. А. Худяков, который стоял во главе петербургского кружка. Между ними состоялись переговоры об объединении московского и петербургского подполий. Худяков писал; "Ишутинский кружок, с которым я познакомился еще летом 1865 г., был одним из замечательных явлений того времени... Эти люди отказались от всех радостей жизни и с самоотвержением молодости посвятили себя делу народного освобождения". Он отмечал далее, что "... в России пробудилась потребность политической свободы. И потребность эта стала всего сильнее чувствоваться с 1861 года со времени освобождения крестьян. Человек, переставший быть рабом, должен быть свободным, а без права выбирать чиновников и требовать их к отчету он остается рабом своего начальства". Сам Н. А. Ишутин так характеризовал причины объединения молодежи в революционный кружок: "Что же делать, ежели скорбь народа дошла до молодежи и больно отозвалась в их сердце, и они хотят помочь ему? Что же делать ежели в благосостоянии народа они видят благосостояние родины. Ведь это народолюбцы!"
Обо всей этой деятельности Войноральский получал скудные сведения из писем Дмитрия Юрасова. Ему страстно хочется быть в курсе всех дел. Он настойчиво приглашает Юрасова приехать в Яренск. Наконец Войноральский получает сообщение Юрасова о возможном своем скором приезде и об общих товарищах по гимназии и университету -- Дмитрии Каракозове, Николае Хлебникове, Владимире Шилле. 27 мая 1865 г. Юрасов писал Войноральскому: "Мы расстались с тобой, когда многое еще не были выяснено -- с тех пор прошло много времени, и нам не приходилось говорить, как следует. Немудрено, найдем друг в друге перемены; я расскажу, что делалось без тебя и что занимает нас теперь. Это будет для тебя интересно, и я уверен, мы не разойдемся с тобой -- по крайней мере в главном. Письмо твое я не получил, но если тебе нужны деньги, то напиши, я постараюсь прислать". В другом письме от 5 октября 1865 г. Юрасов сообщал о прекращении деятельности пензенского кружка, членами которого, очевидно, они были.
Войноральский не оставляет надежды на освобождение из ссылки. В конце 1865 г. он пишет на имя министра внутренних дел следующее заявление: "В настоящее время я нахожусь в ссылке уже около четырех лет. Тяжесть наказания, которое я несу, увеличивается еще более тем, что не имею возможности быть полезным отечеству настолько, насколько позволяют силы... что по моему убеждению, укоренившемуся во мне благодаря полученному мной воспитанию в гимназии и университете, составляет обязанность каждого честного гражданина. Я же, напротив, в продолжение уже четырех лет нахожусь в положении тунеядца... потому что, несмотря на горячее желание найти себе какую-либо работу, достигнуть этого нельзя, и хотя не по закону, то по крайней мере на деле, лишенному прав гражданства". И это письмо Войноральского осталось без ответа. Тогда он направил письмо министру внутренних дел, минуя администрацию ссылки, через своего товарища в г. Устюге. Но у того был проведен обыск, нашли письмо Войноральского. Войноральского отправили в другой уездный город Вологодской губернии --Вельск. Одновременно с Войноральским из Яренска был выслан и его товарищ по ссылке Журавский, сосланный за участие и польском восстании 1863 г.