Почуяв силу, маньчжуры усилили свои набеги на русские города, выросшие на берегу Амура. Некоторые из них им удалось взять приступом, а затем сжечь и разрушить. Среди этих городов были Албазинский и ближайший к нему Кумарский. Часть оставшихся в живых казаков вынудили вернуться на Лену, остальные ушли к Нерчинску.
На амурских просторах воцарилось безлюдье, и лишь развалины поселений свидетельствовали о наличии когда-то здесь жизни.
Вот таким и увидели Амур Никифор Романович Черниговский и его товарищи, когда они в зиму с 1665 на 1666 год прибыли в эти края. Впрочем, уходить отсюда они не собирались, так как лучшего места для постройки крепости трудно было отыскать. Амур тут делал большую пологую излучину, прижимаясь главными водами к русскому берегу. Вдоль всей излучины стеной высился скалистый берег. На нижнем ее конце, где Амур плавно огибает скалистый выступ, и было решено возвести основные сооружения крепости. Отсюда река хорошо просматривалась во все стороны. Вовсе не случайно в свое время именно здесь люди Хабарова решили возводить свои фортеции.
Думали, вот наладят жизнь, а потом и пашенным делом займутся. Примерная картина была до прихода на Амур, когда люди Хабарова и хлеб растили, и несли службу в низших чинах.
Начали с восстановления подъездных дорог к Албазину. Очищали их от упавших деревьев, строили дороги из бревен через топи, заваливали ямы камнем и землей. Одновременно принялись возводить часовню. Как могут православные существовать без храма? Мудрить с архитектурой не стали и сделали все по-простому. Обыкновенный одноэтажный деревянный сруб на сваях из мореной лиственницы с деревянной колокольней. При часовенке — два дома. Жилище попросторнее — для батюшки, другой — для сторожа. Часовенку нарекли в честь Николая Чудотворца. Позже на территории поселения была возведена Воскресенская церковь с приделами Богородицы Владимирской и Архангела Михаила.
Городок рос на глазах. Укреплялись и его стены, в которых появились две проезжие и три угловые подзорные башни, а также два ряда бойниц для верхнего и нижнего боя, позволявших вести интенсивный огонь по врагу. Не забыли укрепить и подходы. Вокруг крепости был вырыт ров шириной в три сажени и глубиной в полторы. За рвом с двух сторон и в два яруса были вбиты надолбы — стесанные в острый конец бревна.
В поселении помимо двух церквей находилась приказная изба с покрытой тесом крышей, где хранились войсковое камчатное знамя, приходные и расходные книги, челобитные и поручительные казаков, а также войсковая казна. Помимо этого — служебные помещения и четыре жилых двора. Еще пятьдесят три жилых двора располагались за крепостной стеной. Избы в большинстве своем без труб, рубленые, со всеми угодьями, хозяйственными постройками и хозяйством снаружи жилья. Внутри — сермяжная простота: горница с волоковым окном, дубовый стол со скамьями, лавка у стены, в углу, как положено, печь.
В 1670 году мирная жизнь для Албазина закончилась, когда, переправившись через Амур, к поселению подошла многотысячная армия маньчжур. Враги попытались взять крепость приступом. Опасность была велика, и в Москву поспешили доложить о поражении Микифорки и его людей. Невероятными усилиями атаману и его казакам удалось выдержать длительную вражескую осаду, поэтому на следующий год старец Гермоген с братией вышли из-под защиты крепостных стен, заложив первый камень в строительство монастыря Всемилостивейшего Спаса возле Албазина. Его возводили на средства албазинских казаков, а также на мирские подаяния, ходя по миру с иконой.
Возле монастыря вскоре появилась крестьянская слобода в один посад — Монастырщина, построенная гулящими людьми и переселенцами, приписанными к Албазинскому поселению. Село как село — рубленые избы с огородами, плетневые сараи, овины… В черемуховую пору его не увидишь. Глянешь издали — одно сплошное белое облако. На въезде в село стоит оберег в виде креста, на который какой-то озорник напялил рубаху со штанами. То ли человек, то ли распятый Иисус.
Пашенные крестьяне обрабатывали монастырские земли, разводили скот, лошадей, занимались ремеслами. Следом возникло еще несколько крестьянских селений — ведь народ продолжал прибывать на Амур. Кто-то шел в поисках лучшей доли, кого-то сослали сюда за провинность и посадили на пашню, дав им ссуду — старых лошадей и жеребят, которые ни в соху, ни в борону не годились. Режущая часть их плугов тоже оказалась старой и негодной. Пришлось все покупать у торговцев в долг.