Kasteel Huys ter Horst werd gebouwd rond 1400 en bleef intact tot de 80-jarige oorlog en tijdens plundertochten deel verwoest, maar ook weer opgebouwd. In 1828 werd een groot deel van het kasteel afgebroken en rest nu alleen nog een ruïne.