Cette maison, implantée à l'angle des rues Eau-de-Robec et du Ruissel, le long du ruisseau du Robec, est construite durant le dernier quart du 15e siècle par un riche fabricant drapier du nom de Cappeles. Outre la fonction de logis, elle sert également de magasin de vente et d'atelier de fabrication pour les opérations de teinture et d'apprêts des draps nécessitant l'utilisation de grande quantité d'eau. L'activité lainière est attestée rue Eau-de-Robec dès le 12e siècle par un texte de 1199 rappelant aux teinturiers leurs obligations en cas de rupture des digues du Robec (voir article R. Blondel). L'édifice conserve sa fonction d'atelier lainier jusqu'au tournant du 17e siècle, lorsque l'activité drapière rouennaise est définitivement déplacée en amont du Robec, sur la commune de Darnétal notamment. L'activité lainière est alors remplacée par celle du coton (indiennes). D'après le cadastre napoléonien, l'activité de teinture est encore bien présente rue Eau-de-Robec et la maison attribuée à un teinturier-apprêteur. Durant cette période, elle est dénommée maison des Quatre Fils Aymon en référence à Renaud de Montauban, héros d'une chanson de geste du XIIe s.

Au début du début du 19e siècle la maison devient un garni : les chambres sont installées dans les étages dessus d'un café-auberge aménagé au rez-de-chaussée. Elle est renommée à cette époque la maison des Mariages car s'y consacrent alors des unions plus ou moins légitimes et plus ou moins éphémères. En 1873, le propriétaire agrandit son affaire en faisant l'acquisition de l'immeuble voisin construit au 17e siècle. En 1881, la ville acquiert la propriété de Ducet.

Impactée par des bombes durant la Seconde Guerre mondiale, elle est désaffectée, squattée, ne cesse de se dégrader. En 1961, face à la menace de la voir disparaitre, la maison est classée partiellement au titre des monuments historiques. En 1976, bien que toujours dans un état délabrée, l'idée de la réaffecter en musée national de l'Education émerge à l'instigation de M. Denieul, directeur du cabinet du ministre de l'Education et ancien directeur de l'Architecture et de M. Bourguignon, conservateur des monuments historiques. Un montage financier entre l'Etat et les différentes collectivités locales est mis en place pour la restauration de l'édifice et son réaménagement en musée. Les travaux sont lancés en juin 1978 : le choix se porte sur la technique de restauration par résines, nouvelle à l'époque. Les poutres anciennes sont conservées, mais les parties les plus endommagées sont remplacées par un béton de résine coulé sur place et relié à la partie saine par des aiguilles en fibre de verre. A l'issue des travaux en 1983, l'aménagement du musée est confié à M. Serge Chassagne nommé conservateur du musée. Le musée national de l'Education est inauguré en 1984.