После смерти И.И. Михельсона вотчина была разделена. Имение Полибино сначала перешло к его сыну, затем к вдове, у которой владение было отобрано в 1830 году на неуплату казённых недоимок и жестокое обращение с крестьянами. В 1841 году дворянской опекой имение было выставлено на торги. И 31 января 1841 года Полибино приобрел для своей семьи В.В. Круковский.
Тогда же началась полная перестройка усадьбы. Был выстроен большой каменный дом с башней и флигелями (предположительно по проекту выдающегося русского художника и архитектора А.П. Брюллова), уже существующие насаждения были дополнены новыми посадками и организован усадебный парк. Помимо парка в усадьбе имелся фруктовый сад, огород с парниками и оранжереями, а к почтовой дороге от дома вела берёзовая аллея. Между парком и садом росла липовая аллея, а с внешней стороны парк был обсажен елями.
Вот как описывала усадьбу Софья Ковалевская в «Воспоминаниях детства»: «Почти к самой усадьбе примыкал лес. Вначале расчищенный и похожий на парк, он становился мало-помалу все гуще и непроходимее и сливался, наконец, с громадным казенным бором. С другой стороны лежал сад, спускавшийся к озеру, а за ним тянулись поля и луга. <...> Среди этой дикой местности странно выступал Полибинский дом, с его массивными каменными стенами, с его причудливой архитектурой, с его террасами, окаймленными гирляндами роз, с его обширными оранжереями и парниками».
