Старая княгиня приехала в Берёзов совсем больная и умерла через несколько недель; её похоронили возле церкви Рождества Пр. Богородицы и над могилой поставили деревянную часовенку, сгоревшую в 1764 г. Князь Алексей Григорьевич в несчастье и ссылке стал невыносим; мучил придирками своих детей, особенно Ивана и княжну Екатерину Алексеевну; он часто упрекал их в том, что они не сумели вовремя заставить покойного государя написать завещание; что будь оно заявлено при жизни его, дело так легко нельзя было бы расстроить. Ивану, а иногда и княжне, приходилось терпеть от отца и побои.
В 1734 г. он умер и был похоронен возле жены. Фельдмаршала Долгорукова правительство вначале как будто щадило. Он был даже назначен сенатором. Положение его при дворе было неловкое, трудное, особенно для него, человека прямого, честного, не умевшего замалчивать правду. Императрица его не любила; Бирон ненавидел, придворные старательно избегали: чувствовалось, что гибель его близка. Нужен был предлог, и предлог нашёлся. Принц Людвиг Гессен-Гамбургский, бывший тогда на русской службе, человек очень сомнительной репутации и признанный шпион, донёс в декабре 1731 г. на старого фельдмаршала. В присутствии нескольких лиц фельдмаршал будто бы оскорбительно отзывался об императрице. Этого было достаточно. Фельдмаршала и его жену немедленно арестовали. В доносе были также названы лица, слышавшие оскорбительные речи фельдмаршала: это были племянник его, князь Георгий Юрьевич Долгоруков, гвардии капитан, князь Алексей Барятинский, и Георгий Столетов, гвардейский офицер. Они были арестованы; этих трёх при допросе пытали. Сенат и генералитет были созваны, чтобы вести судебное дело; с характерной угодливостью они всем вынесли смертный приговор. Императрица смягчила наказание: фельдмаршал и его жена были приговорены к заключению в Шлиссельбургской крепости; имущество их конфисковано. Им было, однако, разрешено жить в Иван-Городе (около Нарвы) под караулом капральства солдат. У остальных имущество было тоже конфисковано, и их самих сослали на вечную каторгу в Сибирь: князья Долгоруков[60] и Барятинский попали в Охотск, Столетов[61] — в Нерчинск. Князь Михаил Владимирович, брат фельдмаршала, назначенный вначале губернатором в Астрахань, затем сосланный одновременно с семьёй князя Алексея Григорьевича в одну из отдалённых своих деревень, пожалованный вскоре по ходатайству фельдмаршала и назначенный губернатором в Казань, теперь был лишён должности и вновь сослан в дальнее поместье. У него было три сына: Сергей, 36 лет, Александр 17 и Василий 9 лет (впоследствии Долгоруков Крымский). Сергей, генерал-майор, был отставлен от службы и сослан в деревню; Александр разжалован в солдаты, без права производства, а Василию воспрещено учиться даже грамоте, предписано с 15 лет служить рядовым всю жизнь. При осаде Очакова он отличился, и фельдмаршал Миних, свидетель его храбрости, не зная его имени, тут же произвёл его в офицеры. Узнав, что это Долгоруков, который был лишён права производства, фельдмаршал воскликнул: «Миних никогда не лгал! Я ему объявил, что он произведён, и он останется офицером!» Благодаря запрещению учиться, к которому он был приговорён, князь Василий Михайлович был почти безграмотен и едва мог подписать своё имя. Позже, когда он был московским генерал-губернатором, ставя свою резолюцию на бумагах, он делал самые невероятные ошибки. Его правитель канцелярии, Василий Степанович Попов, говаривал ему: «Ваше сиятельство сделали ошибку в этом слове», — Долгоруков бросал перо и с досадой говорил: «Вы даже и перьев очинить не умеете!»
Князь Дмитрий Михайлович Голицын, руководитель верховников, был вначале, казалось, в милости у Бирона и немецкой партии. Назначенный сенатором, он редко бывал в заседаниях, и когда столица в 1732 г. была окончательно перенесена в Петербург, он остался в Москве.
Он проводил большую часть года в своём подмосковном поместье Архангельском (теперь принадлежит князьям Юсуповым); там он собрал великолепную библиотеку (около 7 тысяч томов) и старательно держался вдали от двора. Но Бирону во что бы то ни стало хотелось избавиться от этого предприимчивого и умного старика. Я рассказывал уже, что зять князя Дмитрия Михайловича, Константин Кантемир, выиграл процесс о своём наследстве. Антиоха Кантемира научили поднять дело вновь и принести жалобу императрице. Это было в 1737 г. — старого князя посадили в Шлиссельбургскую крепость, где он и умер в следующем году, в апреле. Его второй сын, Алексей, избежал ссылки благодаря своим связям с Салтыковыми; старший, Сергей, был сначала оставлен на своём посту в Берлине, затем послан губернатором в Казань, где был убит молнией 1-го июля 1738 г., вскоре после смерти отца. Князь Дмитрий Михайлович перенёс несчастье с твёрдостью, мужеством и тем достоинством, которое всю жизнь было его отличительной чертой. Его политические заблуждения и олигархические тенденции не могут умалить чувства уважения, которое внушает этот большой человек, гордый, независимый среди моря человеческой низости, так энергично стремившийся к достижению личной независимости, которой большая часть его современников, равных ему по положению и рождению, не знали цены, привыкнув пресмыкаться в рабстве, унаследованном ими от отцов и завещанном потомкам, которые пресмыкаются и по сию пору