Prè-requis
Bases de probabilité, de statistique et d’analyse de Fourier (Cours de L3 suffisant) ; bases de traitement du signal.
Objectif du cours
Dans ce cours, nous présenterons un large panel de modèles mathématiques qui sont au cœur d’algorithmes efficaces permettant de résoudre différents problèmes se posant en photographie numérique. Ces modèles s’appuieront en particulier sur les domaines des probabilités,de l’analyse de Fourier, du transport optimal, de l’optimisation, et de l’apprentissage profond. Une première partie du cours portera sur la modélisation de la chaîne d’acquisition des images numériques (capteurs, échantillonnage, quantification, dynamique de couleurs, modèles de bruit) et sur les algorithmes bas niveau qui s’appliquent à la fin de cette chaîne (débruitage, démosaïquage ou correction des couleurs). La deuxième partie du cours constitue une introduction à des méthodes récentes permettant de résoudre des problèmes difficiles et mal posés en génération ou restauration d’images, comme par exemple le déflouage ou l’inpainting. Nous montrerons comment de tels problèmes peuvent être résolus en ayant recours à des régularisations par réseaux débruiteurs profonds (méthodes plug-and-play) ou à des modèles génératifs profonds. Ce cours constitue une bonne introduction aux cours de modèles génératifs proposés au deuxième semestre.
Organisation des séances
8 séances de 3h :
– Acquisition des images numériques (optique, échantillonnage, modèles de bruit)
– Modélisation du contraste et de la couleur
– Transfert de couleur par transport optimal
– Restauration d’images par régularisation explicite
– Débruiteurs profonds et méthodes plug-and-play
– Modèles génératifs, synthèse d’images et de textures
– Photographie computationnelle (développement des images RAW, inpainting, imagerie HDR) (2 séances)
Mode de validation
Validation par projet : rapport, remise d’un code informatique (langage au choix) et soutenance individuelle
Thèmes abordés
- Acquisition des images
- Radiométrie et colorimétrie des images, perception visuelle
- Restauration des images, problèmes inverses
- Modèles génératifs profonds
- Photographie computationnelle (développement des images RAW, imagerie HDR, inpainting)
Yann GOUSSEAU
Telecom Paris
Arthur LECLAIRE
Telecom Paris
