En 1943, Robert Dumont, directeur de la société de filature et de tissage, demande à l'architecte Charles Vaullery, la construction, à côté de son usine, d'une maison atypique dans le paysage de Caudry. Cette grande demeure appelée "Château Dumont" se caractérise par une architecture moderne. En 2001, la direction régionale des affaires culturelles inscrit cet ouvrage audacieux à l'inventaire des monuments historiques.