Doctorat MSCA ITN EU UNVEIL H/F

Sujet de thèse :
Titre : Traitement et fusion de données acquises par différentes techniques (XRF, HSI, HMI, FUV) afin d'identifier les pigments d'une oeuvre d'art et de caractériser ses matériaux.

Sous-titre : Apprentissage multimodal avec prise en compte de l’incertitude pour la cartographie des pigments : fusion conjointe de données XRF et hyperspectrales

Résumé :
Cette thèse porte sur l’identification des matériaux et des pigments dans le domaine de la conservation du patrimoine (peintures, photographies, sculptures, etc.). L’objectif est de développer une méthode d’apprentissage sobre en données et capable de quantifier l’incertitude, en combinant plusieurs sources d’information hétérogènes, notamment la fluorescence X (XRF) et l’imagerie optique spectrale (hyperspectrale ou multispectrale).

Le cœur du projet est le démélange multimodal (multimodal unmixing), c’est-à-dire l’estimation, en chaque point de l’œuvre, des proportions des différents pigments, malgré peu d’annotations et des écarts importants entre capteurs et entre œuvres. L’identification des pigments découlera ensuite de ces estimations. Le travail tiendra explicitement compte des lois physiques de mélange propres à chaque modalité : mélange quasi linéaire pour la XRF, et modèles de type Kubelka–Munk pour l’imagerie optique.

Les principaux axes de recherche sont :

Acquisition et prétraitement des données multimodales, avec réalisation de maquettes peintes, constitution de jeux de données et alignement entre modalités ;
Apprentissage de représentations robustes, guidé par la physique, avec auto-supervision, augmentation de données et adaptation aux changements de domaine ;
Fusion multimodale et quantification de l’incertitude, pour produire des cartes de pigments interprétables, pondérer dynamiquement les modalités et fournir des niveaux de confiance utiles aux experts.

Résultats attendus :
un jeu de données multimodal de référence, des algorithmes de fusion adaptés au patrimoine culturel, et une chaîne complète de cartographie des pigments produisant des cartes d’abondance interprétables et exploitables par les conservateurs.
Contexte :
UNVEIL est un réseau doctoral européen Marie Skłodowska-Curie réunissant 21 partenaires académiques, culturels et industriels autour du développement de méthodes avancées d’évaluation non destructive et d’outils numériques fondés sur les données pour l’étude des peintures et des œuvres 3D. L’objectif est de mieux comprendre la fabrication et le vieillissement des objets, afin de soutenir leur conservation, restauration et authentification, tout en formant 12 doctorants à l’interface entre ingénierie et sciences humaines.

Le projet combine plusieurs modalités d’imagerie (térahertz, ultrasons, thermographie infrarouge, imagerie hyperspectrale/multispectrale et rayons X) avec des approches de fusion multimodale, de visualisation interactive et de jumeaux numériques. Les résultats sont valid
Voir plus sur le site emploi.cnrs.fr...