По ночам судно ложилось в дрейф. Погода стояла ужасная. Много дней не показывалось солнце, и трудно было определить местонахождение корабля. Полагаться приходилось только на собственный опыт и знания. Как только корабль обогнул Землю Ван Димена и направился на север, ураганный ветер, обрушившийся с востока, превратил восточное побережье острова, который теперь именуется Тасманией, в подветренный берег.
Судно, лишенное возможности двигаться дальше, постепенно захлебывалось и оседало. Бенгальцы больше не желали откачивать воду насосами, а она уже лилась в трюм. Людей отправили вниз вычерпывать ее. Несмотря на то что судно не было перегружено, плотнику никак не удавалось заделать пробоину в правом борту за шпангоутом. Наконец, когда скорость подъема воды в трюме достигла восьми дюймов в час, сумели спустить парус и набросить его на пробоину. Напор воды снизился до четырех дюймов в час, однако корабль был уже обречен. В непроглядной тьме судно несло через пролив Банкс к скалистому, неприветливому берегу, туда, где до сих пор никто не живет. В Вест-Индской компании не знали о существовании пролива, и люди на корабле оказались первыми, кто прошел этим путем.
Из членов команды никто не пострадал, но «Сидней Коув» медленно погружался, и необходимо было немедленно пристать к берегу. 8 февраля 1797 года, на рассвете, Г. Гамильтон направил свой корабль к песчаному берегу острова, который он назвал островом Презервейшн (Заповедный остров). Затем, когда команда благополучно достигла берега, он приказал разместить груз на одном из близлежащих островов, которому дал название «Ром».
Однако одиссея, продолжавшаяся три месяца, на этом не закончилась. Недели через три на воду спустили лодку, и четырнадцать человек отправились в Сидней, чтобы сообщить о гибели корабля. Перебравшись через Бассов пролив во время шторма, они оказались первыми белыми людьми в будущем штате Виктория, так как их лодку выбросило на берег в районе Найнти Майл Бич.
Хью Томпсон, помощник капитана, не мог определить местонахождение лодки. Запасы продовольствия промокли и испортились. Команда попала в окружение недоброжелательно настроенных аборигенов. Уходя от преследования местных жителей, моряки покрывали в день в среднем по десять миль. В течение первого месяца они сумели преодолеть триста миль. За это время погибло девять человек. Раненный копьем Томпсон, испытывавший мучительные страдания, понял, что он и заболевший плотник не смогут идти вперед, поэтому он приказал Кларку, казначею и еще двум оставшимся в живых товарищам продолжать путь. Правда, бедняги едва держались на ногах. Заметив рыбачью лодку милях в четырнадцати к югу от залива Ботани, Томпсон и плотник, собрав последние силы, разожгли костер, чтобы как-то привлечь внимание рыбаков.
