И, однако же, все панычи, не говоря уже о панёнках, любили весёлого Ванюшу. Жизнь его текла привольно в доме старого дедушки. Бабушка смотрела на все его проказы сквозь пальцы, а самому Григорию Фёдоровичу некогда было наблюдать за мальчиком, отчасти за постоянными хлопотами по дипломатическим поручениям, которыми не уставал наделять его неугомонный реформатор, а отчасти по постепенно усиливавшемуся нездоровью. Григорий Фёдорович страдал подагрой.
Неизвестно, заметил ли государь какую-нибудь неисправность в деятельности нашего польского посольства, или вследствие просьбы самого посланника Григория Фёдоровича, но только его отозвали в Петербург, а вместо него приехал в Варшаву сын его, Сергей Григорьевич Долгоруков[22], на попечение которого, для окончательного образования, должен был перейти и наш Ванюша. Горько плакала бабушка, расставаясь с внуком, нелегко было и внуку. Кроме того, что он лишился любви и нежности, сама свобода его стеснилась более бдительным надзором дяди. Избалованному ласками племяннику трудно пришлось уживаться с новыми порядками; он не слушался, вызывал беспрерывно замечания и внушения. Так продолжалось года полтора и, наконец, кончилось тем, что по жалобам брата Алексей Григорьевич вызвал сына к себе.
Пятнадцатилетний Иван Алексеевич по возвращении на родину поселился в родной семье при отце, занимавшем тогда довольно видное место президента главного магистрата. Отвыкшая от Ванюши семья встретила его недружелюбно, а в особенности отец, осыпавший сына градом упрёков и язвительной брани. Алексей Григорьевич корил сына за леность, нерадение, за напрасно потраченное время за границей, корил за то, что только и было хорошего в характере сына: за прямодушие, непрактичность, за неумение выслужиться где следует. С лишком полтора года терпел Иван Алексеевич домашнюю пытку, вплоть до своего назначения, при восшествии на престол Екатерины I, на место гоф-юнкера при царевиче Петре Алексеевиче.
Судьба улыбнулась Ивану Алексеевичу. Десятилетний царевич искренно и горячо полюбил своего семнадцатилетнего гоф-юнкера, такого весёлого, такого симпатичного, умевшего так хорошо забавлять его. Царевич до того привязался к своему новому другу, что не мог расстаться с ним ни на один день, ни на один час. Когда по болезни Иван Алексеевич не являлся в апартаменты царевича, тот приказывал переносить в комнату гоф-юнкера свои занятия, свои игрушки и даже свою постель. Положение царевича при бабушке, хотя и неродной, сразу улучшилось. При жизни деда на царевича никто не обращал никакого внимания, за воспитанием никто не следил; дед не хотел удостоверяться лично в познаниях внука, даже не исполнил просьбы о том воспитателей, хваливших способности и любознательность ребёнка. Все знали тайные желания деда передать престол детям любезной Катеринушки; все умышленно и неумышленно забывали о ребёнке.
Со своей стороны, и ребёнок не любил и боялся сурового, никогда не ласкавшего его деда, так беспощадно сгубившего своего сына, а его отца, о трагической смерти которого услужливые люди успели ему передать под великим секретом. Под влиянием этих рассказов ребёнок рано познакомился с мучительным желанием мести, но так как детское сердце не может питаться одним злобным чувством и не может обойтись без любви, то царевич с ещё большей силой привязался к своему другу гоф-юнкеру. Иван Алексеевич едва ли не первый выказал царевичу и чувство личной привязанности, и преданность будущему наследнику престола; он едва ли не первый опустился перед ребёнком на колени, как перед будущим государем.
К счастью для царевича, Екатерина, любившая своих дочерей не до ослепления, ясно понимала их положение. Сама обязанная престолом, несмотря на своё коронование покойным мужем-государем, единственно энергии нескольких решительных и влиятельных лиц, она понимала невозможность передать престол дочерям, удел которых – замужество за каким-нибудь иностранным принцем, а не самодержавство в России, где искони привыкли к преемственности самодержавной власти по мужской линии. Она понимала, что после смерти её русские всех партий и всех убеждений сойдутся в одной мысли о законности наследства сына царевича Алексея Петровича, и, к чести её, она не возненавидела этого ребёнка, не постаралась оттереть его, а напротив, приблизила и полюбила, насколько могла полюбить.