В Верхоянске находились народовольцы, отбывавшие здесь срок ссыльного поселения, были представители «переходных групп», как называли себя в то время революционеры, начавшие порывать связь с народовольчеством и переходившие к марксизму. Были и представители «экономистов».
Среди ссыльных социал-демократов происходило резкое размежевание. Бабушкин неоднократно вступал в споры с «экономистами» по вопросам партийной программы. Его поддерживали ссыльные рабочие.
Общение с товарищами помогало Ивану Васильевичу переносить крайне трудные условия ссылки.
Заброшенность Верхоянска, в особенности в длительную распутицу, вызывала сильную дороговизну на продукты самой первой необходимости. Цены в Верхоянске на хлеб, сахар, масло были в пять-десять раз выше, чем в Якутске, хотя и там продукты питания стоили гораздо дороже, чем в остальных городах Восточной Сибири. Жить ссыльным на пятнадцатирублевое казенное пособие в месяц было крайне трудно. Поэтому почти все без исключения политические ссыльные занимались различными ремеслами, так как совершенно нельзя было применить свои знания в области науки или искусства: преподавание детям местных жителей запрещалось, а каких-либо конторских или счетных работ в этом городе почти совсем не было.
Иван Васильевич не мог надеяться на денежную помощь своей жены: Прасковья Никитична все время находилась под полицейским надзором, сама с трудом зарабатывала на пропитание, занимаясь поденной работой. Иван Васильевич писал ей в адрес матери, подробно сообщая о жизни ссыльных в далекой верхоянской тундре.
Как хороший слесарь, Бабушкин находил некоторый заработок по починке мелких бытовых предметов, особенно в летнее время. Исправник, зорко следивший за каждым шагом и занятием политических ссыльных, в полугодовых ведомостях доносил губернатору:
«…Бабушкин. Занимается слесарным мастерством, но по отсутствию работы заработок имеет небольшой».
Многие из якутских ссыльных не выдерживали условий жизни в этой «ледяной могиле» или «тюрьме без дверей»: заболевали, кончали жизнь самоубийством.
Несмотря на тяжелые условия, ссыльные оказывали большое влияние на повышение общей культуры окружающего населения, на благоустройство Верхоянска. Они немало потрудились над улучшением дороги от реки Яны к городу.
Оторванные от всего мира, от революционной жизни, ссыльные с большим нетерпением ждали политических новостей. Почта приходила в Верхоянск через месяц или даже полтора. Жадно читали ссыльные весточки от своих родных и друзей, перечитывали каждый номер газеты, доходивший к ним после бесчисленных препятствий якутского и местного начальства. Бабушкин крайне интересовался всякой вестью о II съезде партии, о развернувшейся после съезда борьбе большевиков с меньшевиками, окончательно выявившими свое оппортунистическое лицо. Но переданные условным шифром известия о Ленине, о его борьбе с меньшевиками были скудны и отрывочны: сказывались бескрайные ледяные просторы, на тысячи километров разъединившие неутомимого агента «Искры» и его великого учителя.