Adobe Sensei, l’intelligence artificielle au service de la création

L’intelligence artificielle s’invite partout. Si son apport réel ou son apport hypothétique peut être discutable dans certains cas, cela n’empêche pas qu’elle peut constituer un vrai plus quand elle est dédiée à des domaines spécifiques comme le design ou encore l’édition audio et vidéo. Elle peut simplifier le travail des utilisateurs professionnels comme des particuliers et leur faire gagner un temps précieux sur des tâches complexes ou fastidieuses et où leur réalisation par un opérateur ne fournit pas à proprement parler un gain significatif voire n’en fournit pas du tout. L’éditeur de logiciel Adobe intègre déjà ce type de service dans ses produits depuis quelques années. Voyons un peu plus en détail de quoi il s’agit…

Adobe Sensei est un module intégré à la plupart des produits logiciels d’Adobe, présenté en 2016, et basé sur de l’intelligence artificielle (consultez notre article L’intelligence artificielle pour en savoir plus). Le nom de « Sensei » vient du terme japonais qui signifie professeur ou maître en français. Sensei combine les technologies d’intelligence artificielle et d’apprentissage automatique. Adobe ayant recueilli des milliards de données issues de ses analyses et de ses images, ils sont aujourd’hui en mesure grâce à l’apprentissage automatique de détecter des similitudes et des régularités afin de produire une IA performante dans leurs domaines.

Vous retrouvez dans chacun de nos articles dédiés aux produits logiciels d’Adobe les fonctionnalités qui sont permises grâce à Sensei. Néanmoins, en voici quelques unes que Sensei propose dans les diverses applications d’Adobe :

• Morph Cut dans Adobe Premiere Pro analyse et évalue le contenu d’un film ou d’un clip vidéo et est capable de déterminer grâce à Sensei quel effet est le plus approprié pour cette vidéo
• Face Aware Liquify/Editing dans Adobe Photoshop Lightroom permet d’appliquer des modifications sur un visage sans que les modifications s’appliquent sur le reste de l’image quand cela n’est pas souhaité
• Sensei optimise la recherche de documents en cherchant à comprendre leur sens et leur contexte dans le but d’effectuer des correspondances, comme cela peut être le cas entre des images par exemple
• Sensei c’est aussi un assistant virtuel à commande vocale ajouté aux applications et services de la suite logicielle Adobe Creative Cloud

On peut imaginer qu’à terme Sensei permettra de contrôler intégralement Adobe Photoshop par la voix, expliquer à l’utilisateur comment modifier des photos et des vidéos comme un professionnel et propulser des technologies émergentes comme la peinture en réalité virtuelle via Project Dali ou l’outil de retouche photo Artistic Eye. Adobe, utilisant aujourd’hui la vision par ordinateur pour manipuler des photos, a pour but d’étendre ses services de vision aux entreprises ou aux développeurs souhaitant analyser des images ou donner la visibilité à leurs produits. Le but de Sensei n’est pas de généraliser son IA mais uniquement de proposer une variété de services pour les créatifs. Sensei va permettre dans le futur de réduire la courbe d’apprentissage et d’accélérer la réalisation des travaux de création.

Sensei est capable en un instant de fournir des mots-clés de ce qu’il a réussi à identifier sur une image et d’extraire ces différentes parties de l’image dans des vignettes. Il peut ensuite proposer des images issues d’Adobe Stock qui sont en relation avec l’image sur laquelle vous travaillez. Chaque mot-clé est isolé et peut faire l’objet d’une nouvelle recherche plus précise. Il peut ensuite grâce à des curseurs permettre de choisir la quantité, la densité ou les couleurs de l’élément que l’on recherche afin d’affiner les résultats et trouver l’image qui se rapproche le plus de ce que l’utilisateur recherche.

Mais Sensei peut aussi rechercher dans votre propre photothèque afin de retrouver une photo d’un objet ou d’un personnage bien précis. Si vous avez plusieurs photos de ce que vous recherchez, il vous laissera affiner vos caractéristiques de recherche afin de retrouver votre photo parmi des milliers d’autres. Sensei peut créer seul des masques afin d’optimiser l’intégration d’un objet photographique dans une photo de son environnement. Il peut aller jusqu’à vous proposer une police de caractères qui correspond avec l’environnement de la scène afin d’intégrer un titre dans votre visuel.

Sensei propose également un outil appelé Creative Graph qui permet de reconstituer l’ensemble des étapes qui ont permis de parvenir au rendu final sous forme d’un arbre et à nouveau d’appliquer des changements individuels sur chacun des éléments du visuel identifiés sans jamais avoir à les resélectionner via un outil de sélection manuel ou semi-automatisé. On peut grâce à ce système remplacer un objet par un autre ou même un personnage par un autre en seul clic et avec une qualité d’intégration surprenante dans l’ensemble du visuel.

Enfin, Sensei propose aussi une plateforme API qui permet aux utilisateurs professionnels de charger leurs propres données afin de s’offrir les services de Sensei pour leur analyse et ainsi bénéficier de son expertise.