В XV веке эти земли принадлежали влиятельным татарским родам, затем имением владел князь М. Глинский. Но особо яркую страницу в истории Каролино вписал знаменитый граф Антоний Тызенгауз. Это по его инициативе началось создание великолепного дворцово-паркового комплекса, был заложен парк, возведены жилые и хозяйственные постройки. После Тызенгауза имение переходило из рук в руки. И к началу XX столетия усадьба начала приходить в упадок, здания постепенно превращались в руины. К счастью, нашлись люди, понимающие ценность того, что осталось в Каролино. Они рискнули возродить имение графа Тызенгауза, им это удалось.