Но Байрон направил свой взор в другую сторону.
На одном из танцевальных вечеров в Мельбурн-хаусе, где Каролина выступала во всем блеске, Байрон заметил молодую женщину, незамужнюю, немного полную и явно сдержанную. Это была племянница леди Мельбурн, девушка философического склада. В своем дневнике в тот вечер Аннабелла не зашла так далеко, чтобы предугадать его роль в своей судьбе; вместо этого она написала, что его рот выдает язвительность — человек он, как видно, крайне надменный, не всегда старающийся это скрыть. В письме к матери она признается, что не является поклонницей «Чайльд-Гарольда», хотя и не будет отказываться от знакомства с его автором. Байрон заметил ее скромность, свежесть облика, пухлые розовые щечки, столь непохожие на искусственную красоту остальных присутствующих дам. Однако Байрон принял ее за чью-то компаньонку, а не за полноправную наследницу. Это Томас Мур сообщил ему о ее состоянии и сказал: «Женись на ней и восстанови Ньюстед».
«Боюсь, что я был, есть и буду привязан к другой, той, с которой я никогда много не разговаривал», — объявил Байрон леди Мельбурн. Та была удивлена, узнав, что речь идет о ее неуклюжей племяннице, и тут же заметила, что бедняжка Аннабелла может и похорошеть, если влюбится в него. Однако, несмотря на ее собственнические инстинкты, леди Мельбурн решила, что брак сможет освободить Байрона от Каролины, чьи чары еще не полностью развеялись; кроме того, ей льстила его радость по поводу того, что теперь он сможет называть ее «тетушкой». Именно она, по просьбе Байрона, передала формальное предложение, и именно ей сообщили разочаровывающий ответ: «Считая, что он никогда не будет предметом такой сильной привязанности, которая может составить мое счастье в домашней жизни, я ни в малейшей степени не желала оскорбить его криводушием». Возможно, Байрон мог бы вызвать ее любовь, добавила она, но у нее нет уверенности, что он может заслужить уважение. Однако своей подруге леди Госфорд она призналась, что крайне взволнована и полагает, что ей необходимо придать своим чувствам иное направление.
Байрон воспринял отказ без печали и заявил, что она — холодная закуска, в то время как он предпочитает горячую пищу на ужин. Леди Мельбурн по собственной инициативе решила не ставить точку в этом деле и спросила Аннабеллу, какие качества она хотела бы видеть в муже. В ответ Аннабелла передала ей список, включающий ответственность, силу и благородство чувств, разум, бережливость, хорошие манеры, которые ценила выше красоты, и добавила, что «не войдет в семью, где были случаи сумасшествия». Леди Мельбурн усомнилась, что, предъявляя подобные требования, Аннабелла когда-либо найдет человека, достойного стать ее мужем, и напомнила, что брак — это лотерея.
