Het château Després werd gebouwd in de loop van de 18de eeuw door de adellijke familie ‘de Bagenrieux’. Rond 1860 bouwde Auguste de Bagenrieux, ingenieur bij de Belgische spoorwegen, het zuidelijke deel van het kasteel. Uit financiële noodzaak verkocht de familie het eigendom aan Madame Dumortier die het kasteel bewoonde met haar kinderen.
In 1911 kocht de heer Louis Després – Vandevelde het kasteel van de familie Dumortier-Hannecart over. Hij verfraaide het kasteel en voegde twee torens toe, evenals de conciërgewoning en de huidige bijgebouwen. Het château Després kreeg toen zijn huidige uitzicht. De heer Louis Després - Vandevelde stierf in november 1937. Samen met hun enige zoon, Roch, bleef zijn vrouw in het kasteel wonen tot aan haar dood in juli 1956. Op 2 april 1973 stierf Roch Després waardoor hij zijn bezittingen gedeeltelijk aan zijn echtgenote, Nelly Moreau, naliet.