Ерофей Павлович послал казаков в Якутск с донесением, прося у воеводы помощи. Хабарову было ясно, что иначе он не сможет удержать в подчинении обширный край.
Донесения о действиях Хабарова шли в Якутск и в Москву. Московское правительство решило послать на Амур воеводу и 3000 стрельцов. Для организации нового, Даурского воеводства и подготовки к принятию на месте большого войска сначала послали на Амур чиновника Сибирского приказа Зиновьева с отрядом в 150 человек.
Пока Зиновьев собирался и ехал в Даурию, слух о богатствах новой земли быстро распространялся по Сибири. Со всех концов необъятной Сибирской земли потянулись на Амур русские люди. Иные вместе с семьями снимались с насиженных мест и шли на Амур. Якутский воевода, обеспокоенный массовым уходом людей с берегов Лены, высылал даже в погоню отряды, которые зачастую и сами присоединялись к ушедшим. Чтобы не
пускать людей на Амур, воеводе пришлось устроить на Олекме специальную заставу.
Встреча Зиновьева с Хабаровым произошла у устья Зеи в августе 1653 года. После того как Зиновьев роздал царские награды, он заявил Хабарову, что ему поручено «всю Даурскую землю досмотреть и его, Хабарова, ведать». Иными словами, Хабаров устранялся от дел, и начальником становился Зиновьев. Часть казаков, недовольная Хабаровым, воспользовавшись таким оборотом дела, обвинила своего начальника во всевозможных притеснениях и, главное, в том, что он государственному «делу не радел, а радел своим нажиткам…» Обвинив Хабарова в государственных преступлениях, Зиновьев арестовал его и повез в Москву. Все принадлежавшее Хабарову имущество было конфисковано.