Затем Кабарегу вместе с Мвангой под конвоем направили в Буганду. За время путешествия сначала через выжженное и опустошенное Буньоро, а затем через цветущую Буганду он вновь обрел присутствие духа. Когда его и Мвангу британские власти в Кампале приговорили к ссылке на Сейшельские острова и они двигались к озеру Виктория, Кабарега, как свидетельствует современник-колониальный чиновник, «шел гордо, повелительно-презрительным взглядом окидывая зеленую и прекрасную страну, так сильно отличавшуюся от его собственной бесплодной земли, опустошенной годами войны и голода. Это зрелище должно было наполнить его восхищением и завистью, но он повернулся к сломленному духом Мванге и сказал: „Ну и отвратительная страна! Если бы я владел ею, я был бы только рад уехать из нее при любых обстоятельствах — даже в изгнание!“»>{23}.
Кабарега покидал Буньоро, когда им «правил» под властью англичан его сын Китахимбва. В 1902 году его заменили братом Духагой II, которого британские власти сочли более покорным. Это был тот самый маленький принц, плененный вместе со своей бабкой, матерью Кабареги, в 1895 году. Его, как и Китахимбву, баньоро считали кьебамбе — узурпатором, поскольку их настоящий героический омукама Кабарега был еще жив. Буньоро стало дистриктом в Северной провинции британского протектората Уганда; с ним в отличие от Буганды, Торо и Нкоре-Анколе не было заключено соглашение, предоставлявшее определенные права «туземной» администрации. До 1933 года Буньоро имело статус «завоеванного королевства». В африканской администрации, переделанной по образцу Буганды, посты вождей высших ступеней долгое время занимали баганда. Но мятежный дух баньоро не был сломлен. В 1907 году там вспыхнуло восстание, вошедшее в историю под названием Ньянгире. Баньоро отказались признать власть колониальных вождей-баганда, сжигали их дома и устроили настоящую демонстрацию, на которой кричали: «Ньянгире абаганда!»— «Я отказываюсь от баганда!». Британские власти арестовали 54 баньоро-зачинщиков восстания и выслали их из Буньоро. Но восставшие добились своего — с 1908 года новых вождей-баганда в Буньоро не назначали.
А Кабарега больше никогда не увидел своей родины. Двадцать четыре года он провел в ссылке. О его жизни там практически ничего не известно. Известно только, что вместе с ним было несколько его ближайших родственников, в том числе десять лет бок о бок с ним провел его сын Тито Габафуса, который в 1924 году стал новым омукамой Буньоро Тито Виньи IV. Он выполнял при отце функции секретаря и, видимо, немало узнал об истории Буньоро. Вряд ли случайно он опубликовал свою «Историю Буньоро» в 1934–1935 годах в «Уганда джорнел» под псевдонимом К.В., что означало: Кабарега и Виньи.
