В Латвию Ксенофонтов и Соболевский приехали в начале апреля. Погода стояла холодная, а вся одежда Ивана Ксенофонтовича — ватный пиджачок да кавказская папаха, накануне отъезда купленная за рубль на Сухаревке. Работу найти не удалось. Мест не было. Кое-как перебивались поденщиной. Не могли ничем помочь и социал-демократы из Рижской организации, с которыми Ксенофонтов и Соболевский установили связи по явкам, полученным в Москве.

Но зато сразу по приезде в Ригу Иван Ксенофонтович включился в партийную работу. По поручению Рижского комитета Социал-демократии Латышского края он часто выступал на собраниях рабочих.

Накануне 1 Мая полиция произвела массовые аресты. Она рассчитывала таким путем предупредить первомайские выступления. На одном из собраний был арестован и Ксенофонтов.

Три недели отсидел он в тюрьме. В 20-х числах мая полиция освободила задержанных. Ксенофонтова обязали в течение трех суток покинуть Ригу. Снова встал вопрос: где жить, чем заниматься дальше?

При Рижской социал-демократической организации существовал легальный Русский культурный центр. Он устраивал для русских рабочих и их семей вечера, концерты, лекции, экскурсии. Руководил центром большевик М.С. Новов, член Рижского комитета СДЛК. Иван Ксенофонтович был знаком с ним и решил перед отъездом зайти попрощаться.

Новов расспросил Ксенофонтова о его дальнейших планах. Затем сказал:

— Иван Ксенофонтович, я хочу предложить вам остаться в городе для подпольной работы.

— Что я буду делать?

Нам в организации нужен профессионал. Главным образом для печатания на гектографе листовок и проведения нелегальных собраний. Кроме того, потребуется ваше участие в работе культурного центра. Нужно будет установить связи с наиболее подготовленными социал-демократами, обеспечить их выступления перед рабочими с лекциями и беседами. Вам тоже иногда придется выступать на вечерах и собраниях, разумеется, конспиративно, под вымышленной фамилией. Мы считаем, что вы вполне справитесь со всем этим.