L'idée du musée du textile est née du succès rencontré par une exposition textile en 1985, à Remiremont : le préfet des Vosges et l'association d'histoire locale de Remiremont au regard de toutes les richesses présentées par le textile dans la région, font germer l'idée d'un musée, idée portée et partagée par toute une population fière de son passé et soucieuse de sa mémoire.