Летом 1657 г. объединенное войско шведского короля Августа и Семиградского князя Ракоши, осадив Брест, добилось успеха. Причиной тому была измена наемной немецкой пехоты. В условиях осады немцы «своровали… Бресть сдали и сами… остались у короля шведского, а осталось де их 1700 человек». По другим сведениям, противник овладел городом «через трактат», т. е. заставив гарнизон сдаться на определенных условиях. В честь этой сомнительной победы была вырезана специальная гравюра, на которой изображена сцена осады Бреста, снабженная соответствующим комментарием.
Нам представляется, что на гравюре изображена не реальная плановая ситуация Бреста и его укреплений, а, вероятно, попавший в руки шведов проект строительства нового, но так и не законченного комплекса фортификационных сооружений города. Их частичное возведение продолжалось в 1658 г. после того, как Брест удалось снова вернуть. Это произошло благодаря операции, разработанной гетманом Павлом Сапегой. 12 июля 1657 г. он приказал М. Радзивиллу, подчашему Великого княжества Литовского, набрать и возглавить отряд добровольцев для неожиданного нападения и захвата Брестской фортеции. Там, судя по достоверным сведениям, находился гарнизон численностью не более 600 человек из войска Семиградского князя Ракоши. Гарнизон возглавлял престарелый комендант Гонди. Операцию по захвату замка готовили в обстановке секретности. П. Сапега приказал все тщательно разведать и, выбрав нужное время, «учинить эксперимент: спешив людей, подобраться как можно тише, …чтобы никто и пера не уронил», а затем атаковать укрепления, захватив противника врасплох. Пушки было приказано не зарывать, а ставить для стрельбы прямой наводкой.
Операция удалась. 20 августа о ней говорилось уже как о свершившейся. Гетман личным письмом поблагодарил М. Радзивилла и его отряд, состоявший из «обывателей Брестского воеводства», как от своей «персоны, так и от всей Речи Посполитой за совершенный труд… при отобрании Бреста, за что все Отечество должно отплатить… благодарностью».
Судя по документам, гарнизон сдался отряду на условиях каких-то «пунктов». 15 сентября 1657 г. П. Сапега обратил внимание М. Радзивилла на слишком поспешный прием Брестской фортеции и выпуск из города гарнизона во главе с комендантом Гонди. В результате в замке не досчитались 11 пушек. П. Сапега приказал задержать семиградцев для выяснения вопроса и забрать у них часть пушек.
В освобожденном Бресте, опустошенном и разграбленном, началось медленное восстановление укреплений. Для завершения строительства Брестской фортеции в 1658 г. выделялось сеймом Речи Посполитой 10 тыс. злотых и планировалось поставить нужное количество пороха, ядер и оружия. Гетман Великого княжества Литовского получил наказ содержать здесь столько пехоты, сколько будет требовать ситуация. Однако реальные обстоятельства русско-польской войны делали подобные декларации лишь благим пожеланием. Не случайно поэтому в следующем, 1659 г. Варшавский сейм лишь продублировал ранее принятое постановление о Брестских укреплениях. Трудно сказать, что все же было сделано по укреплению города. 8 января 1660 г. войска царского воеводы И. А. Хованского, подойдя по льду к городским укреплениям, захватили их. После этого до 13 января шла осада замка, который также взяли штурмом. И. А. Хованский стоял в Бресте до весны, посылая оттуда ратных людей в глубь Польши. В занятом городе воеводе пришлось строить укрепления для защиты своих войск. В донесении царю, датированном 9 марта 1660 г., он сообщал, что «Брест верхний город укрепил я накрепко, сверх старых крепостей по земляному городу нарубил тарасы в 2 стены рублены, а вышиною 2 сажени, а в иных местах и в 2 Чг, а хлебных запасов в Бресте года на два будет тем людям, которые оставлены, а соли и пушечных всяких запасов гораздо много, сидеть в Верхнем городе бесстрашно от неприятеля, а большого города занять некем, надобеть посадить тысячи 4, а на меньшую статью 3000, и то будет неприятелю страшно». Однако ход русско-польской войны и Оливский мир между Швецией и Речью Посполитой, высвободивший значительные воинские силы последней, вынудили Хованского оставить Брест в том же месяце и двинуться к Ляховичам. Укрепления города, похоже, при отходе царскими войсками сожжены не были, поскольку о них говорилось 20 июня 1660 г. как о существующих, «а про город сказывали: летом приступом взять не мочно, потому что сказывают, обошли реки». В 1661 г. Брест снова оказался в руках русских войск, поскольку тогда же плохо вооруженная шляхта безуспешно пыталась добыть Брестскую фортецию. Лишь позже, в том же году, она снова оказалась в руках Речи Посполитой.
