Kasteel ter Elst est un château situé dans la commune de Duffel . C'est l'un des bâtiments les plus anciens de la province d' Anvers . Une ruine est tout ce qui reste de ce château.

La plus ancienne référence du Kasteel ter Elst se trouve dans une source écrite au XIIe siècle . A cette époque, le château appartenait aux frères Hildincshusen. 

De 1356 jusqu'à la Révolution française en 1789, le château appartenait à l' abbaye de Tongerlo et était occupé par l' intendant . Il servait également de résidence aux personnes de la noblesse. 

En 1584, le château brûla et fut reconstruit. 

Un siècle plus tard, vers la fin du XVIe siècle, c'était un presbytère. 

D'après les dessins des XVIIe et XVIIIe siècles, le Kasteel ter Elst était un vaste bâtiment entouré de douves et de jardins. 

En 1799, le château est vendu à Louis Hermans, qui fait démolir trois des quatre corps de logis du complexe et restaurer l'aile avec les tours.

La briqueterie Ter Elst a été fondée près du château en 1879 par C. Funcke. 

Pendant la Première Guerre mondiale , le château subit de lourds dommages, et en partie à cause de la concurrence des briqueteries de Kempen , le château est devenu une ruine.