Однако Унгерн категорически отказался от подобного компромисса: «Или ступайте добровольцами, или же мне вас не нужно», — заявил он казачьему сходу. «Вследствие решительного отказа от мобилизации ни к барону, ни к Резухину пополнений так и не поступило, несмотря на явное в иных местах сочувственное отношение к ним, — вспоминал H.H. Князев. — Барон Унгерн искренне считал, что если он с жертвенным жестом протягивает руку братской помощи казачьему населению, жаждущему освобождения от советской власти, то никто не имеет права отказаться от принятия этой жертвы». Для барона, искренне верившего, что повсюду «найдутся честные русские люди», готовые бескорыстно присоединиться к нему для борьбы с совдепией, подобное рассудительное отношение казаков стало тяжелым ударом. Несмотря на то что Унгерн был крайне раздражен своей первой открытой неудачей, он 5 июня обходит Троицкосавск и отрезает гарнизон города от сообщения с базами. «По совершенно непонятным соображениям барон начал бои за обладание Троицкосавском вяло, как-то неуверенно, то есть не в свойственном ему стиле, — вспоминал H.H. Князев. — Чем это объяснить? Может быть, отсутствием у него соответствующего настроения?» Тем не менее в ночь с 5 на 6 июня барон произвел личную глубокую разведку позиций красных, проникнув в глубь расположения противника. Бой начался рано утром б июня атаками унгерновцев на северо-восточную окраину города. К 18 часам Русский дивизион ротмистра Забиякина подошел вплотную к городским окраинам. С сопки Забиякин рассмотрел в бинокль, как красные солдаты митинговали на площади. Очевидно, они обсуждали вопрос о сдаче города. Забиякин доложил об увиденном Унгерну и попросил разрешения войти в город. Однако барон ответил: «Я на митинги не хожу и тебе не советую…» и приказал дать отдых войскам. Итак, еще один день был потерян, и потеря эта оказалась для белых роковой — ночью в Троицкосавск прорвался один из полков 35-й советской дивизии… На рассвете 7 июня отдохнувшие белые части вновь перешли в наступление. Однако преимущество и в численности, и в вооружении было уже на стороне красных. Барон Унгерн прилагал максимальные усилия к тому, чтобы лично поспевать всюду, желая сохранить возможный контроль над ходом боевых действий. Дважды лично он водил свои сотни на занятые противником высоты, но обе попытки успеха не принесли. Тем временем красные, получив новые подкрепления в виде двух пехотных батальонов и артиллерийской батареи, перешли в наступление. Бой шел до темноты. Ночью окрестности города затихли. «Для нас, превратившихся… из нападающей стороны в обороняющуюся, в этой затаившейся тишине вырастали тревожные призраки», — вспоминал поручик Князев. Этими «призраками» оказались бойцы красной Сретенской бригады, которые под покровом ночи прошли хорошо знакомыми им глухими лесными тропами через слабоохраняемый юго-восточный участок фронта белых, оказавшись у них в глубоком тылу.
8 июня советские войска силами полка пехоты повели наступление на левый фланг белых со стороны Ургинского тракта. Унгерновцы стойко оборонялись, а сам барон, по свидетельству очевидцев, «комбинировал в голове какой-то контрманевр». Но все изменилось после того, как сретенцы открыли из засады артиллерийский и пулеметный огонь по обозу белых. В тылу поднялась паника. «Обозники порубили постромки и устремились через сопки на юг, без дорог, по кратчайшему направлению. В разбросанных по отдельным вершинам… сотнях создалось представление, что мы окружены: помилуйте, глубоко в тылу гремит неприятельская артиллерия… Унгерновцы начали отходить…» — вспоминал те жуткие минуты H.H. Князев. Положение усугубилось ранением самого Унгерна: он был ранен шальной пулей «в седалищную часть туловища». Ранение было легким, но весьма болезненным: пуля застряла возле позвоночника. Героическим усилием воли Унгерн заставил себя вскочить на коня, но, выехав из зоны обстрела, сам слезть с седла уже не смог. Выглядел тогда барон как тяжелобольной: он осунулся, совершенно пожелтел, а после перевязки долго лежал без движения.