Во время Великой Отечественной войны 1941-1945 г.г. в имении располагался немецкий госпиталь, здесь проходили ожесточенные бои.
От прежней усадьбы сохранились руинированные остатки бывшего дворца и флигелей, прослеживаются фундаменты других строений; частично сохранился старинный парк с высохшими прудами.
Недалеко от Скугорево располагалось имение Васильевское Юхновского уезда.
В Экономических примечаниях к Планам генерального межевания, составленных в 1781 г., указано: « В Сельце Васильевское Юхновского уезда Лопухиной В.Б.- 32 дома и 320 душ крестьян». В вотчину Васильевское входило пять деревень: Попово, Пауки, Аленино, Мальцева, Панино, в которых было 41 двор и 501 душа крестьян, земли 1622 десятины, в том числе 1470 десятин пашни. В сельце находился деревянный дом « изрядной архитектуры», мельница с доходом 10 рублей. Крестьяне были на двухрублевом оброке.
В конце 18 века император Павел I пожаловал подполковника Казачьего полка Василия Васильевича Орлова-Денисова имением, где была основана усадьба: построены деревянные усадебный дом и хозяйственные строения, разбит парк с прудами. Усадьба стала именоваться по имени владельца - Васильевское. Граф Василий Васильевич Орлов-Денисов (1775-1843 гг.) к началу 1812 года в звании генерал-майора командовал лейб-гвардии Казачьим полком, во время Отечественной войны был командиром партизанских казачьих отрядов, особенно отличившихся в боевых действиях на территории Смоленской губернии, затем был начальником личного конвоя императора Александра I, генерал-адъютантом, генералом от кавалерии, удостоен множества наград. Портрет его помещен в Военной галерее Зимнего дворца.
В 1826 г. в сельце Васильевское вместо сгоревшего в 1812 г. деревянного дома Орлов-Денисов построил новое дворцового типа каменное двухэтажное (3-й этаж надстроен позднее) здание с двумя отдельно стоящими двухэтажными каменными флигелями, круглое с восьмью полуколоннами сооружение для артезианского колодца, расширил регулярный и пейзажный парки со сложной системой прудов и каналов, канал окружал и усадебный дом, перед которым было сооружено озеро с очертаниями двуглавого орла. В 1834 году граф построил каменную церковь во имя Николая Чудотворца.
Главный дом - трехэтажное кирпичное оштукатуренное здание дворцового типа в монументальных формах ампира, строгих и парадных. Крупный прямоугольный объем с подчеркнутым цоколем, двумя высокими этажами и низким антресольным имеет по краям главного, обращенного к пруду фасада, сильно выступающие ризалиты. Заглубленный центр дома выделен парадным портиком из полуколонн с лепными капителями, поставленным на выступ нижнего этажа. Центр противоположного паркового фасада украшен таким же портиком, поддерживающий простой антаблемент со ступенчатым аттиком. Остальное внешнее убранство здания лаконично. Нижний этаж, отделенный карнизной тягой, прорезан частыми арочными окнами в нишах такой же формой с замками в архивольтах. Широкие простенки рустованы. Над прямоугольными окнами парадного второго этажа, объединенными подоконной тягой, находились плоские нити. Венчает здание широкий карниз с небольшими аттиками по средним осям боковых ризалитов. Первоначально в центре главного фасада находилась широкая полукруглая лестница.
