История усадьбы Панское начиналась задолго до 1805 г., когда полковник Дмитрий Иванович Кудрявцев по завещанию получил во владение деревню Бородухино.
Дом сложен из бревен и обшит тесом. К центральной части дома, выходящей к р. Луже, пристроен деревянный портик, состоящий из шести деревянных колонн дорического ордена. Противоположный фасад имеет два ряда окон и тоже шестиколонный портик.
Главный дом усадьбы был окончательно достроен в 1814 г. и сохранился до наших дней. Этот деревянный двухэтажный особняк в стиле русского классицизма - типичное дворянское гнездо. Вид его вызывает в памяти произведения русских классиков Пушкина, Тургенева, Гончарова.
По преданию в 1812 г. в Панском располагалась ставка казачьего атамана генерала М.И. Платонова. После Великой отечественной войны в доме устроили пионерский лагерь, его сменил сиротский дом, детский санаторий.