In het plaatsje Holthees stond in 1450 een hof dat voor 1500 werd vervangen door een kasteel. In de 17e en 18e eeuw werd het een buitenplaats dat in 1802 in verval kwam en werd afgebroken. De nog overgebleven kasteelboerderij werd in de slag om Overloon verwoest. Vandaag resteert bovengronds nog een vervallen schuur van de oudste voorburcht, met daarin nog de voet van een toren.
De huidige eigenaar wilde de bouwval slopen en diende hiervoor een verzoek in bij de plaatselijke gemeente. Door deze actie van de eigenaar kwam de monumentale status van het pand aan het licht en besloot men over te gaan tot restauratie.
Bouwstudio PelserHartman maakte een gedetailleerde bouwkundige opname van het pand en reconstrueerde de situatie op tekening zoals deze ooit was. De tekeningen diende als onderlegger voor het maken van een renovatieplan.