Жили они в небольшом двухэтажном стандартном доме, в котором было четыре комнаты — две в первом и две во втором этаже. Платили за дом 10 шиллингов в неделю. Луиза перешла работать в зеленную лавочку.
Через три года в семье появился первый мальчик. Его, конечно, назвали Гарольдом. Гарольд-старший решил оставить флот, так как очень тосковал по жене и детям. Он сошел на берег, год жил на пособие по безработице, потом устроился кондуктором в автобусе, а через два года стал водителем. Это было в 1938 году. В 1940 году родился третий ребенок — опять сын, которого назвали Питер. А 12 февраля 1943 года на свет появился еще один мальчик — Джордж. Он родился в собственном доме, как это было принято в те годы в небогатых семьях.
Джордж рос очень послушным мальчиком, как и все дети в этой семье. С самого детства Джордж всегда кого-то жалел, помогал пожилым людям, которые жили по соседству, или просто старикам на улице. Любил он и животных и всегда старался их накормить. Но, к сожалению, Джордж часто болел. Особенно его мучил тонзиллит, который остался у него на всю жизнь. Сам он вспоминает, что в детстве у него было мало запоминающихся событий, кроме болезней. Тем более, что тонзиллит всегда появлялся накануне 12 февраля. Впервые Джордж проснулся, чувствуя себя здоровым, в день, когда ему исполнилось 13 лет. Это показалось ему самому необычным, и он попросил, чтобы его показали семейному врачу. Результатом было то, что его немедленно отправили в больницу с диагнозом «нефрит».
Музыкой Джордж в детстве не интересовался, хотя мать и отец ею увлекались. Зато он любил разные шоу. Как-то раз отец купил детям кукол-марионеток, и Джордж стал регулярно разыгрывать для домашних маленькие спектакли, стоя на коленках за диваном и ловко управляя куклами.
Луиза была ревностной католичкой и хотела, чтобы ее дети учились только в школах, где преобладали дети католиков, но эти школы были переполнены. Поэтому, когда Джорджу исполнилось 6 лет, его отдали в ту же «Давдейл», где уже учился Джон Леннон. Джордж был на три года младше, и, естественно, они друг друга не знали.
В это же время семья Харрисонов переехала в новый дом в районе Спик. Дом был двухэтажным, как и тот, в котором они жили раньше, но большим, современным и красивым, с просторной кухней, гостиной, холлом и четырьмя спальнями.
Учился Джордж в школе хорошо. Ему все давалось легко, хотя, по его словам, он почти не прикасался к учебникам и не тратил много времени на домашние задания. У него была хорошая память, и он запоминал все, что говорили на уроках учителя.
С раннего детства Джорджа привлекали самые разнообразные занятия. Став старше, он даже научился шить на швейной машинке и умело переделывал свои школьные брюки на модные «дудочки».
Окончив школу, Джордж без труда поступил в Ливерпульский институт, в котором учился Пол Маккартни. Там он сразу прослыл пижоном. Он носил самые длинные волосы, что раздражало учителей, у него были невероятно узкие брюки, жилет канареечного цвета, а однажды он явился в голубых замшевых туфлях. Все это, однако, не мешало ему быть нормальным парнем. Он увлекался легкой атлетикой, играл в футбол, хорошо плавал и любил ездить на велосипеде, изучая окрестности.
Институт Джорджу быстро надоел. Впоследствии он говорил: «Я терпеть не мог наших учителей. Они вбивали нам в головы собственные заблуждения... А я хотел лишь одного: быть самим собой». Три года он бунтовал, спорил, дерзил, пропускал занятия. Потом решил «не высовываться». Учителя, которые устали от его проделок, также решили его не трогать. И Джордж преспокойно спал на задней парте. Случалось, что просыпался он тогда, когда уроки давно закончились.
В это время Джордж стал увлекаться скиффлом. Его кумиром был Лонни Донеган. Однажды, придя домой из института, он сказал матери, что один его одноклассник продает гитару за 3 фунта, и попросил разрешения ее купить. Мать сразу согласилась. Джордж купил самоучитель и стал по нему заниматься. Сначала ничего не получалось. Он отчаивался, говорил, что гитарой ему никогда не овладеть. Но Луиза подбадривала его: надо только не отступать, и все получится. Джордж разбивал в кровь пальцы. Он хотел научиться играть так, как Лонни Донеган. Первую гитару он доконал быстро, и мать купила ему новую — настоящую, дорогую, за 30 фунтов. Вдвоем они часто засиживались далеко за полночь, штудируя самоучитель.