Спустя два года, когда к городу близко подошли белые, в Доме Свободы разместились службы штаба Южного фронта Красной Армии.
Затем дом передали под Комитет комсомола. Комсомольцы, просвещая молодежь, организовали здесь клуб имени Луначарского.
В 30-е годы здание отдали под жилые помещения. Но память о нем как о Доме Свободы в народе сохранялась, а на фасаде висела соответствующая памятная доска.
В 1988 году использовать историческое здание под жилье посчитали неправильным. Людям выделили отдельные квартиры, а в Доме Свободы было решено сделать Музей истории Рязанской комсомольской организации. На субботниках здание подремонтировали и разместили в нем экспозицию.
С момента развала СССР и роспуска комсомола власть стала смотреть на музей косо. Избавившись от слова «комсомол» в названии, его переименовали в «Музей истории молодежного движения» (МИМД). Хотели разбавить экспозицию экспонатами антисоветского характера, но не нашли достаточного их количества. И, в конце концов, разбавили общей информацией о самодеятельном творчестве молодежи.
В «лихие» 90-е годы, когда «демократов» во власти сменяли то «коммунисты», то «патриоты», музей получал, соответственно, то разрушительные директивы, то помощь, то попросту безразличие. Попытка «глобальной десоветизации» по Федотову-Караганову при Президенте Д. Медведеве, быстро сойдя на нет, прошумела мимо МИМД.
Но нынче десоветизаторы сменили свою тактику на более осторожную. И — всерьез взялись за мелкие провинциальные объекты советского прошлого. Заявляемая ими цель — мало-помалу стереть всю память о советском прошлом из городских ландшафтов, а значит, и из сознания людей.
И вот 18 декабря 2015 года из сообщения в новостях на телеканале «Культура» сотрудники МИМД неожиданно узнали об организации, «по задумке вдовы Солженицына», в Доме Свободы музея его имени. И, заодно, о переносе МИМД — неизвестно куда… Надо сказать, что после визита в Рязань Натальи Солженицыной прошло уже почти полгода, и подобное уведомление выглядело столь же самочинным, сколь и запоздалым.
Пребывая в полном недоумении, сотрудники МИМД обратились за разъяснениями в Министерство культуры и туризма Рязанской области, в ведомстве которого состоит музей.
Ответом на этот запрос стал вызов 27 декабря 2015 года первым заместителем министра М. В. Горожановой музейщиков к себе «на ковер». В весьма нелюбезных выражениях замминистра обрисовала будущую судьбу МИМД: «дадут пару комнаток в доме Щедрина», «фонды перевезете в Константиново в запасник музея-заповедника имени Есенина». Музейным работникам ясно дали понять, что вопрос «в верхах» уже решен и сопротивление бесполезно.
