Ни в какой другой местности Соединенных Штатов колониальные традиции не сохранялись так долго, как в приморской Виргинии. Здесь гнездилась старинная аристократия, чья жизнь протекала за стенами роскошных особняков, в окружении подобострастных слуг и фамильных портретов, по обычаям некогда процветавшей колонии, которых почти не коснулось дыхание перемен. По улицам Ричмонда разъезжали плантаторы верхом на чистокровных скакунах, катились кареты местной знати с чернокожими кучерами на козлах и ливрейными лакеями на запятках; губернатор, будь у него такое желание (а оно, как правило, являлось очень скоро), мог содержать при себе по меньшей мере герцогский двор; здесь заседало законодательное собрание штата, а в местном суде произносили речи выдающиеся юристы. Блестящее ричмондское общество жило весьма насыщенной жизнью, в которой Алланам вскоре предстояло принять участие; в среде его бытовали любовь к изящным искусствам, уважение к традициям и наследственным титулам и кичливая местническая гордость. Такова была атмосфера, воздействие которой суждено было испытать юному Эдгару По.
Семья Аллана недолго оставалась у Эллисов и уже осенью 1820 года переехала в свой новый дом, где Эдгар встретился с повзрослевшими товарищами своих детских игр; и хотя узнать друг друга было нелегко, нити общих воспоминаний по-прежнему крепко связывали их вместе.
Среди вновь обретенных друзей был и Эбенезер Берлинг, с которым По познакомился когда-то в церкви. Он жил со своей овдовевшей матерью на Бэнк-стрит и, судя по всему, сыграл немалую роль в важнейших событиях, происшедших в жизни Эдгара в этот период. Вместе они прочли «Робинзона Крузо» и вскоре стали плавать по реке Джеймс в раздобытой где-то лодке — воображение По превратило ее позднее в «маленькую прогулочную яхту», упоминаемую в самом начале «Приключений Артура Гордона Пима». Мысленно возвращаясь к этой детской робинзонаде, он пишет в 1836 году в журнале «Сазерн литерери мессенджер»:
«С какой любовью воскрешаем мы в памяти те волшебные дни нашего детства, когда мы впервые в раздумье склонились над страницами „Робинзона Крузо“! Когда впервые ощутили, как разгорается в нас неутолимая жажда приключений, с трудом вчитываясь при неверном свете костра в эту книгу, строчка за строчкой постигая чудесную ее мудрость и с трепетным, захватывающим дух нетерпением открывая сердце ее пленительному, колдовскому очарованию. Но увы, дни необитаемых островов безвозвратно ушли в прошлое».
В играх, увлекательных похождениях по окрестностям Ричмонда, налетах на чужие сады и других, столь же отважных и захватывающих предприятиях Эдгар обычно бывал заводилой. Робость и боязливость, свойственные ему в раннем детстве, исчезли, усердные занятия в школьных гимнастических залах в Ирвине и СтоукНьюингтоне сделали из него отличного бегуна и прыгуна; кроме того, пребывание в английских школах привило ему сноровку и вкус к кулачным боям, что, наверное, заставляло сверстников относиться к нему с должным уважением. Чаще всего его спутниками, помимо Эбенезера Берлинга, бывали Джэк Макензи, Роб Салли и маленький Бобби Стенард. Давняя склонность Эдгара к веселым розыгрышам еще больше усилилась, и проделкам его не было конца. Однажды он даже появился в облике привидения перед засидевшимися далеко за полночь игроками в карты, наделав немало переполоху.
Однако уже в ту раннюю пору характер его начал обнаруживать странное многообразие противоречивых черт и свойств, которое всегда изумляло современников и биографов и долго еще будет оставаться для мира загадкой. Он был добрым и веселым товарищем в играх, что подтверждают многочисленные свидетельства друзей детства, но в то же время одиноким и болезненно восприимчивым мальчиком. Его ум и душу уже смущали и тревожили тайны бытия, волновали смутные стремления тонко чувствующей натуры к недостижимому совершенству прекрасного. Найти им удовлетворение в повседневной жизни он не мог и все чаще искал уединения, предпринимая первые робкие попытки выразить свои переживания пером и кистью, однако плоды своих опытов скрывал от посторонних глаз, предвидя неизбежные насмешки сверстников и холодное непонимание взрослых. Он приобрел страсть к чтению и собиранию цветов, а оставаясь наедине с собой, мог часами предаваться мечтам.