Оставалась неприятная обязанность сообщить о смерти Аллегры Шелли. На следующий день Байрон написал: «Этот удар был сильным и неожиданным… Не знаю, есть ли мне в чем упрекнуть себя относительно моего поведения, намерений и чувств к дочери». Байрон еще не знал, что Клер уже в городе. Шелли поспешил отправить ее в Леричи, где его семья и семья Уильяме искали летний дом. Они устроились во дворце Магии у залива и только потом сообщили Клер о смерти Аллегры. Она приняла это известие спокойнее, чем они предполагали, но дала волю своим чувствам в гневном письме Байрону, обвиняя его в плохом отношении к себе и ребенку. Байрон отправил письмо Шелли. Больше всего на свете он мечтал забыть обо всем. Он согласился на просьбу Клер прислать ей портрет Аллегры и позволить ей увидеть гроб с телом в Ливорно, прежде чем его переправят в Англию, но от этого ее отговорил Шелли.
Байрон нашел забвение в заботах о судьбе Титы, потому что в ночь смерти Аллегры к нему пришло известие о намерении сослать его слугу. Байрон через Докинза использовал все свое влияние, но тщетно. Во флорентийской тюрьме Титу вынудили сбрить подозрительную бороду. Шпион Торелли записал в своем дневнике: «…когда ему приказали побриться, он решил, что бороду отдадут его хозяину, лорду Байрону, но, когда его разубедили, он бережно завернул ее в бумагу». Тите, который перестал быть устрашающей фигурой, разрешили вместо ссылки в Болонье отправиться в Лукку, откуда он пробрался к Шелли во дворец Магии.
Байрон понимал, что наказание Титы и семьи Гамба направлено против него самого. Хотя он знал, что для Гамбы будет лучше уехать из Пизы и поселиться в его летнем доме неподалеку от Ливорно, пока не утихнет шумиха вокруг истории с Маси, он все же до середины мая оставался во дворце Ланфранки. Лень и уныние, охватившие его после смерти Аллегры, мешали ему уехать.
Шелли и Уильямсы уехали, а Трелони отправился в Геную, чтобы наблюдать за строительством лодок. Дело Маси еще не закончилось, потому что правительственные чиновники питали подозрение и недоверие к Байрону, а его слуги и друзья способствовали развалу пизанского кружка, начавшемуся после отъезда Шелли. В конце мая Байрон отправил большую часть своих вещей и вещей графа Гамбы на виллу в Ливорно.
Вилла Дюпьи представляла собой низкий приземистый сельский дом, расположенный на склоне холма в четырех милях от Ливорно. Летом тонкие розовые стены, казалось, пропускали солнечные лучи. Главным преимуществом виллы была ее уединенность, близость к морю и прекрасный вид с террасы на оливковые деревья, белые домики Ливорно и ослепительный простор Средиземного моря. С балкона открывался вид на Эльбу и Корсику.
Приехав в предместье Монтенеро, где находилась вилла, Байрон обнаружил, что в гавани причалила средиземноморская эскадра Соединенных Штатов. Байрону много лет льстило восхищение американцев его творчеством, он часто подумывал о путешествии в эту молодую страну, где, по его мнению, он обретет «посмертную славу», и он выразил желание осмотреть американский фрегат, после чего получил сердечное приглашение командира конвоя Джейкоба Джоунса осмотреть корабль «Конституция». Молодой выпускник Гарварда двадцатидвухлетний Джордж Бэнкрофт, возвращавшийся из Германии и ставший впоследствии известным американским историком, оказался проездом в Ливорно и стал свидетелем встречи Байрона с экипажем корабля. Он вспоминал, что, поднявшись на палубу, Байрон был взволнован и скован, возможно, из-за своей хромоты, но, когда его восторженно приветствовали молодые американцы, он стал «смелее, откровеннее и радостнее». После этого он посетил корабль «Онтарио», где с удовольствием обнаружил нью-йоркское издание своих поэм. Это польстило его самолюбию и подкрепило уверенность в своей всемирной славе. Байрон говорил Муру, что «лучше бы получил приветственный кивок от американца, чем табакерку от императора».
На следующий день молодой Бэнкрофт зашел в Монтенеро, и Байрон забросал его вопросами о Вашингтоне Ирвинге, чьей «Историей Нью-Йорка до конца голландской династии» он восхищался. Бэнкрофт также общался с Гете и передал Байрону, что этот корифей литературы был в восторге от «Манфреда» и «Дон Жуана», которые он считал «полными жизни и гениальности». Байрон представил Бэнкрофта Терезе и сказал, что только что заказал для нее в Вене фортепиано. «Мы говорили по-итальянски, и, судя по всему, лорд Байрон прекрасно владел этим языком».