Впервые поэт увидел Анабеллу в салоне леди Каро, но тогда она не ответила на его чувства. Но Байрон не привык отступать и вскоре добился своего. Тем не менее он продолжал встречаться с Августой. С самого начала было понятно, что авантюра с женитьбой завершится катастрофой. В характере супругов не было ничего общего, и брак в конце концов закончился разрывом. В воздухе запахло сенсацией. Августа ссылалась на душевную болезнь брата, однако собравшийся консилиум врачей признал, что он абсолютно здоров.
Анабелла с самого начала не подозревала о сложившихся между братом и сестрой отношениях. Только в Сикс Майл Боттоме перед ней открылась мрачная картина. Любовники не обращали внимания на присутствовавших, а Медору Байрон даже открыто называл своей дочерью.
Когда Байрон вернулся в Лондон, он стал устраивать роскошные приемы, в результате состояние жены и его наследство растаяли без следа. Бывали моменты, когда Байрону даже приходилось продавать собственные книги. Анабелла, с детства купавшаяся в роскоши, стала чувствовать себя более чем некомфортно, что приводило к шумным скандалам. Байрон, несмотря на любовь к Августе и женитьбе на Анабелле, продолжал путаться с певичками и актрисами из низкопробных театров, что выводило Анабеллу из себя. Тем временем у Августы родилась еще одна дочь от Байрона, Ада. Положение усугубилось, когда поступило предложение выгнать его из палаты лордов, где его старательно избегали, а на улице оскорбляли. Байрон решил покинуть страну, в которой ему больше не было места. Его ожидало мучительное прощание с Августой. Она впервые за все годы плакала, жалуясь на угрызения совести. Когда расстроенная Августа ушла, Байрон сел писать послание Анабелле: «Я уезжаю, уезжаю далеко, и мы с тобой уже не встретимся ни на этом, ни на том свете… Если со мной что-то случится, будь добра к Августе, а если и она к тому времени станет прахом, то к ее детям».
Разрешив все формальности с супругой, Байрон переехал в Венецию, где поселился около площади Святого Марка. Маргарита Кони стала его любовницей. Но темпераментная итальянка быстро надоела Байрону, и он тактично попросил ее вернуться к мужу. Однако в ответ Маргарита ударила его ножом, к счастью задев лишь руку.
С графиней Терезой Гвиччиоли Байрон познакомился только потому, что она походила на его любимую сестру. Эта девушка была «тициановской блондинкой с прекрасными зубами, густыми локонами и чудесной фигурой». О Байроне она писала следующее: «Его удивительные и благородные черты, звуки его голоса и неописуемое очарование, исходившее от него, делали его созданием, оставлявшим в тени всех людей, которых я встречала до сих пор».
