Сумасбродство не помешало Л. А. Пушкину позаботиться об образовании детей. Правда, на иностранный лад, но тогда и не умели иначе воспитывать. Его сыновья, Василий (1767– 1830) и Сергей (1770–1848), с детства были зачислены в гвардию, откуда начались и их литературные знакомства, так как почти все образованные русские люди прошли тогда через гвардию. Братья Пушкины были плохие служаки. Сергей Львович перешел из Измайловского в Егерский полк, но в обоих служил спустя рукава. Даже при Павле забывал мелочи дисциплины и одежды, к которой был так строг Гатчинский капрал. В его царствование братья Пушкины, как и многие дворяне, поспешили выйти в отставку и перебраться в Москву, подальше от диких царских вспышек. К этому времени Сергей Львович был уже женат. Опекун и покровитель Надежды Осиповны, И. А. Ганнибал, согласился на брак потому, что считал жениха очень образованным. Братья Пушкины знали французский язык и литературу, умели вести непринужденный разговор, умели держать себя на людях. Они любили читать и покупали книги, спорили, думали, дружили с сочинителями и сами сочиняли. Кругом них большинство дворян чванилось пышностью приемов и выездов, количеством дворни, собак и псарей. Среди наполненной сплетнями, ссорами, крепостными потехами московской жизни Пушкины создавали себе умственные интересы. Они были люди легкомысленные, ленивые, порхающие, но с ясно выраженными умственными потребностями, что заставляло их крепко держаться той группы просвещенных дворян, откуда пошла русская интеллигенция, и занимать в ней определенное место. «За неимением действия, уже и разговоры были тогда действием», говорил об этой эпохе умный князь П. А. Вяземский.
В семье Пушкиных литературность и умственность шли, главным образом, от отца и от дядюшки Василия Львовича. Мать, Надежда Осиповна, была просто взбалмошная и балованная женщина, жизнь которой проходила между светскими забавами и частыми беременностями. Она родила восьмерых детей, из которых только трое – Ольга (1797), Александр (1799), Лев (1805) – пережили ее, остальные умерли детьми. Надежда Осиповна с детьми была очень не ровна. Любимцем матери был младший, Лев, и многое сходило ему с рук, хотя близок с матерью и он не был. Семья вообще была неласковая. Старшему же сыну, Саше, часто и сурово доставалось от матери.
Московская старожилка Е. П. Янькова, которая возила дочерей к Пушкиным в Немецкую слободу на танцевальные уроки, так рассказывает про них: «Пушкины весело жили и открыто. Всем домом заведовала старуха Ганнибал, очень умная, дельная и рассудительная. Она и детьми занималась, и принимала к ним мамзелей, и сама учила. Старший внук ее, Саша, был большой увалень и дикарь, кудрявый, со смуглым личиком, не слишком приглядным, но с очень живыми глазами, из которых так искры и сыпались. Иногда мы приедем, а он сидит в зале, в углу, огорожен кругом стульями, что-нибудь накуролесил и за это оштрафован, а иногда и он с другими пустится в пляс, да так был неловок, что над ним посмеются, а он губы надует и уйдет в угол… Бабушка любила его больше других и жаловалась: «Что-то его не расшевелишь и не прогонишь играть, а развернется, расходится, ничем не уймешь».
Было что-то в этом мальчике, что раздражало нетерпеливую Надежду Осиповну. Как и многим матерям, ей хотелось, чтобы ее сын был приятным, покладистым ребенком, чтобы он был, как все. А это ему с самых ранних лет было трудно. «Сашка», как звала Н. О. Пушкина своего первенца, был неловкий, сонный толстяк. Мать, вспыльчивая и резкая, хотела наказаниями и угрозами победить раздражавшую ее упрямую лень, заставить мальчика принять участие в играх его сверстников. Раз на прогулке Саша незаметно отстал от других и преспокойно уселся среди улицы. Соседи, смеясь, смотрели из окна, как маленький барчонок с копной золотистых кудрей роется в пыли. Мальчик заметил их смех, обиделся, встал, сердито пробормотал: «Ну, чего зубы-то скалите?» – и побрел домой.
В материнских нападках сказывалось не только личное раздражение, но и неуклюжее желание воспитывать. У Саши была скверная привычка тереть ладони. Надежда Осиповна завязывала ему ручки за спину и так оставляла на целый день, даже есть не позволяла. Мальчик часто терял платок; мать приказывала пришить его к курточке, и потом заставляла мальчика выйти в гостиную, что больно задевало детское самолюбие. При столкновениях с гувернерами мать неизменно брала их сторону. Взбалмошная, она умела быть злопамятной. Рассердится и целый год не разговаривает с девятилетним сыном. Суровость капризной воспитательницы не смягчалась ни любовью, ни чуткостью. Мать Пушкина ни сердцем, ни умом не понимала сына, никогда и ничем не облегчила трудности и противоречия, с детства кипевшие в его своеобразной, страстной, нежной душе.