Rond 1354 wordt in bronnen melding gemaakt van een 'verwoesting van een kasteel Horst'. In 1557 koopt Wijnand Hackfort, burgemeester van Arnhem, het landgoed Ter Horst. Hij bouwt er op dat moment een kasteel: deels op oudere, 15de-eeuwse muurwerken. Het is bedoeld als zomer- en jachtverblijf.
Het landgoed is deels toegankelijk voor publiek, er worden rondleidingen gegeven.
De duivenzolder bevindt zicht in de rechter zijgeven van het kasteel.
Meer informatie: kasteelterhorst.nl