Construit au début des années 1850 et agrandi en 1913, le château est devenu la résidence de la famille du directeur des usines et de la cartonnerie Adt, d'où il tient son nom. Lorsqu’au lendemain de la Première Guerre Mondiale, la famille fut expulsée pour avoir lié sa cause à l'Allemagne, le Château Adt est racheté par la famille de Wendel puis transformé en hôpital des Houillères. Désormais, il accueille le Conservatoire de Musique et de Danse.