La collaboration entre Cornell CIS et Adobe crée un outil photo IA

Il pourrait y avoir un nouvel outil sympa pour le logiciel de retouche d'image à l'avenir. Si vous aimez transformer votre photo en Monet ou Warhol, il existe désormais un moyen d'apporter des modifications à une photo en transférant le style et d'autres éléments d'une autre photo.

Le professeur d'informatique Kavita Bala, le doctorant Fujun Luan et les collaborateurs d'Adobe Sylvian Paris et Eli Shechtman ont publié un article détaillant leur nouveau Deep Photo Style Transfer. L'article explique comment les chercheurs ont augmenté le transfert de style, transposant l'apparence d'une photo sur une autre à l'aide de réseaux de neurones pour s'assurer que les détails de l'image originale sont préservés. Les chercheurs présenteront leur article à la conférence sur la vision par ordinateur et la reconnaissance de formes en juillet.

"Il y a eu beaucoup d'intérêt pour l'idée de styliser les photographies", a déclaré Bala. "Ce qui nous a motivés, c'est l'idée que le style pouvait être imprimé sur une photographie, mais qu'il s'agissait toujours intrinsèquement de la même photo. Cela s'est avéré incroyablement difficile. L'idée clé était finalement de préserver les limites et les contours tout en transférant le style."

Les chercheurs ont utilisé l'apprentissage automatique en profondeur pour ajouter une couche de réseau neuronal qui accorde une attention particulière aux bords de l'image, comme la frontière entre un arbre et un lac.

"La méthode que nous avons mise au point est étonnamment très efficace. C'était un problème difficile à résoudre, alors quand nous l'avons fait fonctionner après de nombreuses tentatives de solution, ce fut une grande percée", a déclaré Bala. "La réponse a été exceptionnelle. Il a définitivement captivé l'imagination des gens comme un moyen de styliser les photos d'une manière plus dramatique."

Leslie Morris est directrice des communications pour l'informatique et les sciences de l'information.

Recevez les nouvelles de Cornell directement dans votre boîte de réception.