В Ричмондской школе Эдгар По сделал большие успехи во французском языке и в латинском, но еще больше в плавании и в беге. Один из его товарищей говорит в своих воспоминаниях, что Эдгар По был своевольным, капризным, склонным быть повелительным и, хотя исполненным благородных порывов, не всегда добрым, или даже любезным, и, таким образом, он не был повелителем или даже любимцем школы. Было тут нечто и другое, более важное для психологии школьников. Об Эдгаре По знали, что родители его были актер и актриса и что он зависел от доброты того, кто взял его как приемного сына. Все это вместе влияло, по-видимому, на мальчиков так, что мешало им выбрать его вождем. Нужно еще сказать, что мистер Аллэн гордился своим красивым и одаренным приемышем, но он не испытывал к нему отеческой привязанности — чувство, которого всегда хотело впечатлительное сердце этого тонко-чувствительного существа. Трудно оценить, с каких ранних дней запала горечь в сердце Эдгара По и как рано зоркий его ум увидел несоответствие между внутренними достоинствами отдельного человека и внешним отношением к нему людей.
Очень интересны воспоминания об Эдгаре По доктора Эмблера: «Я помню моего старого школьного сверстника, Эдгара Аллэна По. Я провел мои ранние годы в городе Ричмонде, и в промежуток времени 1823–1824 года я был в постоянной с ним близости. Никто из живущих, смею сказать, не имел наилучшего случая познакомиться с его телесными свойствами, ибо два лета мы раздевались ежедневно для купания и учились плавать в том же самом прудике, в бухточке Шоко. Эдгар По не выказывал способности к плаванию; позднее, однако же, он сделался знаменит, совершив плавание от Уорвика до Моста Майо». Сам Эдгар По, говоря об этом случае своей жизни, замечает: «Любой плавательчерез пороги в мои дни переплыл бы Геллеспонт и ничего бы особенного об этом не думал. Я проплыл от Набережной Лодлэма до Уорвика (шесть миль) под жарким июльским солнцем против одного из самых сильных течений, какие вообще ведомы в реке. Проплыть двадцать миль в тихой воде было бы достижением сравнительно легким. Я бы не так уж много думал и о попытке переплыть Британский Канал из Довера в Калэ». Легкость такой попытки есть, конечно, поэтическое преувеличение, но факт того, что он проплыл шесть миль, засвидетельствован его сверстниками, впоследствии полковником Майо и доктором Кэбеллем. Майо, проплыв три мили, отказался от дальнейшего состязания, а Эдгар По, несмотря на крайне жаркий день, доплыл до конца, но, когда он вышел из воды, все лицо его, шея и спина были покрыты волдырями. Он, однако, не казался очень усталым и немедленно после такого свершения, предпринятого на пари, пошел назад пешком в Ричмонд.