Мать отдала сына в школу в возрасте пяти лет, когда он еще не умел читать. Целый год ученики заучивали слова, а Байрон, не умея читать, просто запоминал их на слух. Через год ему дали прочитать первый урок, что он сделал с легкостью, так как знал его наизусть. Но когда перевернули страницу книги, то сразу выяснилось, что читать он не умеет. Кроме няни для его обучения был нанят священник Росс, который произвел на мальчика самое приятное впечатление «мягкими манерами и добродушием». Под его руководством Байрон быстро освоил чтение и страстно увлекся историей. Получив начальное «домашнее образование», Байрон поступает в гимназию, где учится до 4 класса.
Когда ему исполнилось 10 лет, скончался его дядя, и Байроны переехали в Англию, унаследовав родовой титул и поместья, главным из которых было Нюстедское аббатство. За год до этого произошел следующий эпизод, который можно назвать пророческим. Мать Байрона зимним вечером 1797 года прочла вслух напечатанную в газете выдержку из речи, произнесенной в палате общин. Присутствующий при этом ее знакомый сказал мальчику: «Возможно, что мы когда-нибудь будем читать в газете и твои речи, произнесенные в палате общин». На что Байрон серьезно ответил: «Надеюсь, что нет. Если вам придется когда-нибудь читать мои речи, то это будут те, что я произнесу в палате лордов». И через год, в мае 1798-го, умирает двоюродный дядя Байрона, и 10-летний мальчик становится лордом.
Родовое поместье Байронов мать и сын нашли в плачевном состоянии. Поэтому они переехали в Ноттингем, где Екатерина, ставшая матерью лорда, активно занялась лечением ноги сына. Для того чтобы мальчик не отставал от учебы, его стали посещать местные учителя. Надо сказать, что Джордж Байрон всегда хорошо относился к тем людям, которые были к нему добры, хотя обидевших или оскорбивших его он не прощал и всегда пытался отомстить им.
В 1801 году Байрон поступает в школу в Харроу. Первые полтора года обучения были наиболее трудными. «Я был самым непопулярным мальчиком в школе, – читаем в его дневнике, – но впоследствии стал вожаком». Поначалу над ним смеялись и даже жестоко подшучивали. С большим вниманием к Байрону отнесся ректор школы доктор Друри, который помог мальчику влиться в школьный коллектив. Хотя Байрон очень гордился своим аристократическим происхождением, в выборе друзей он отдавал предпочтение личным достоинствам перед титулом. Среди друзей большинство были дети младше его по возрасту и физически слабее. Одним из его приятелей по школе был Роберт Пил, знаменитый в дальнейшем государственный деятель.
Основными предметами в школе были древние языки и математика, и именно к этим наукам Байрон чувствовал непреодолимое отвращение. Поэтому многие преподаватели считали его лентяем, не способным ничему научиться. Но во всякого рода проказах Байрон был вожаком. Он «возглавил» сторонников ректора Друри, когда тот был удален из школы, и остался последним, кто относился к новому ректору Батлерсу, назначенному вместо Друри, враждебно.