Qu’est-ce que la synthèse d’images ?
La synthèse d’images génère du contenu visuel à partir de règles procédurales, de simulations, de texte, d’exemples, de scènes 3D ou de modèles appris. Le résultat peut représenter une scène spécifiée, prolonger une image existante ou créer de nouvelles variantes.
Fonctionnement de la synthèse d’images
La synthèse construit des pixels à partir d’une spécification contrôlable plutôt que de simplement sélectionner une capture existante. Un moteur de rendu évalue la géométrie de la scène, les matériaux, les éclairages et une caméra ; les systèmes procéduraux évaluent des règles ; les générateurs appris échantillonnent un modèle conditionné par du texte, des images, des masques ou d’autres signaux. Les méthodes en temps réel privilégient une latence bornée, tandis que la production hors ligne peut consacrer davantage de calcul à chaque résultat. Les images générées entrent dans la chaîne de traitement avant la révision, la composition, la gestion de la provenance et l’encodage de diffusion.
Points clés
- Le rendu fondé sur la physique approxime le transport de la lumière à partir d’une scène explicite, tandis qu’un modèle génératif peut produire des pixels plausibles sans scène géométrique inspectable.
- Une graine aléatoire fixe favorise la répétabilité, mais l’obtention d’un résultat identique peut encore dépendre du modèle, de l’échantillonneur, de la version du logiciel, de la précision numérique et de la plateforme d’exécution.
- Les scènes synthétiques étiquetées peuvent fournir des masques, de la profondeur ou des poses directement à partir de leurs générateurs, bien qu’un écart entre les images simulées et capturées puisse limiter le transfert du modèle.
Quand la synthèse d’images est importante
Choisissez une méthode de synthèse en fonction du contrôle, du réalisme et de la reproductibilité requis, ainsi que des contraintes de licence. Les images générées peuvent contenir des erreurs structurelles ou des détails non étayés ; les usages à fort enjeu nécessitent donc une validation.