Мацудайра выбрали меньшее из двух зол и присоединились к Имагава, чтобы вместе отразить нападение Ода. Однако защита со стороны военного губернатора сюго была не бесплатной. Отец Иэясу Хиротада (1526–1549) был женат на женщине по имени Одай (1528–1602) из клана Мидзуно. Женитьба Хиротада на Одай имела, как было принято в ту пору, политическое значение и должна была скрепить связь между Мацудайра и Ода, с которыми Мидзуно находились в хороших отношениях. Однако смена лидерства в Мидзуно, сделавшая клан еще более ориентированным на союз с Ода, заставила Мацудайра пересмотреть свои связи с Мидзуно, дабы они не угрожали связи Мацудайра с Имагава. Когда в 1544 году Хиротада открыто порвал с Мидзуно, он отправил Одай — мать Иэясу — в родительский дом. В результате этой семейной политики Иэясу был разделен с родной матерью, когда ему едва исполнился один год.
И это было еще не все для Иэясу, который в то времени носил имя Такэтиё. В качестве платы за свою существенную помощь в битве с Ода военный губернатор Имагава Ёсимото в 1547 году потребовал, чтобы Мацудайра Хиротада отправил своего старшего сына Такэтиё в ставку Имагава в Сунпу, провинция Суруга (ныне — город Сидзуока, префектура Сидзуока) в качестве заложника. Четырехлетнего ребенка по дороге в Сунпу захватила одна из партий клана Тода и доставила его не к Имагава Ёсимото в провинцию Суруга, а к Ода Нобухидэ в провинцию Овари. Следующие два года Такэтиё провел в Ацута, провинция Овари, в качестве заложника семьи Ода. Весной 1549 года в Ацута пришла весть, что отец Такэтиё Хиротада неожиданно умер возрасте 23 лет. Как и его отец, Хиротада погиб от руки недовольного вассала. Со смертью молодого лидера клан Мацудайра охватил хаос: вассалы разошлись кто куда, земли были захвачены, а замки заняты Имагава. Позднее, в том же году, войска Имагава сумели овладеть замком Андзё, цитаделью Ода в западной части Микава. Захватив замок, они взяли в плен старшего сына Ода Нобухидэ, Нобухиро, который в течение более шести месяцев защищал замок от Имагава. Тогда Ода и Имагава согласились обменять Такэтиё на Нобухиро. Такэтиё было позволено вернуться на короткое время в родной замок Окадзаки (город Окадзаки, префектура Аити), однако это не изменило его статуса заложника. Через десять дней его отправили в Сунпу, где Имагава будет держать его в качестве пленника до 1560 года, когда Нобунага уничтожит войска Имагава в сражении при Окэхадзама.
