Les Sneaks Adobe MAX : l’Intelligence Artificielle comme vecteur d’innovation pour le futur de la créativité

Rendez-vous préféré des aficionados de l’événement Adobe MAX, les Sneaks sont l’occasion, pour Adobe, de partager les dernières technologies et fonctionnalités susceptibles d’étoffer prochainement les solutions et les outils. Cette année, les Sneaks offrent un avant-goût intéressant de la manière dont l’IA contribue à multiplier les possibilités de création, que vous envisagiez de créer des environnements 3D immersifs, de réaliser des vidéos animées pour les réseaux sociaux ou de concevoir des projets en conditions réelles.

Kevin Hart, acteur et humoriste reconnu, a eu l’honneur de dévoiler les innovations de cette nouvelle édition, aux côtés de nos ingénieurs.

Rendez-vous ici pour revoir ce temps fort incontournable.

Project Clever Composites

Vous est-il déjà arrivé de vouloir vous glisser sur l’arrière-plan d’une photo ? Peut-être avez-vous visité la Tour Eiffel, mais fait l’impasse sur la pose devant ce monument emblématique. Avec le Project Clever Composites qui propose un outil d’édition d’images composites, l’oubli est aussitôt corrigé !

Même si la superposition ou la combinaison d’images sur arrière-plan fait partie des tâches courantes dans les applications de retouche d’images, elles peuvent se révéler chronophage. Elle implique généralement plusieurs tâches manuelles telles que la recherche d’une image, le découpage précis d’un objet et la modification à la main de sa couleur, de sa tonalité ou de son échelle.

Project Clever Composites recourt aux technologies d’IA et d’automatisation pour transformer ce processus fastidieux en une opération facile, aussi simple qu’un glisser-déposer. À présent, les utilisateurs sont capables de repérer en un clin d’œil les objets susceptibles d’être ajoutés sur une image d’arrière-plan et de découper automatiquement ceux qui les intéressent, d’ajuster la couleur et la taille de ces objets pour l’harmoniser l’arrière-plan, et de générer une ombre en analysant l’éclairage d’arrière-plan. Rien de plus facile que d’insérer un objet dans un arrière-plan et d’obtenir une image réaliste en quelques clics.

Biographie du présentateur : research engineer chez Adobe, Zhifei Zhang est spécialisé dans la retouche, la composition et la représentation d’images.

Project Instant Add

Une fois parvenu au stade de la postproduction d’une création vidéo, vous êtes-vous déjà aperçu que vous aviez oublié d’y insérer un logo ou que d’autres ajustements s’imposaient ?

Project Instant Add fait appel à l’IA et au Machine Learning pour simplifier le processus, d’ordinaire complexe et chronophage, de montage vidéo et d’ajout d’effets spéciaux en postproduction. Grâce à cette innovation tout droit sortie de nos laboratoires, chacun peut retoucher le contenu d’une vidéo comme il le ferait sur une image. Les utilisateurs se contentent de choisir l’image ou la texture plaquée de la vidéo sur laquelle ils souhaitent ajouter du texte ou des images, et notre technologie d’IA répercute ensuite automatiquement ces modifications dans toute la vidéo avant d’opérer le rendu final.

Project Magnetic Type

Lors de la création de logos ou d’autres formes de typographie, l’habillage d’une forme avec du texte est un excellent moyen de donner vie à ce dernier. Pour autant, le processus consistant à fusionner des formes ou des objets avec du texte se doit d’être extrêmement précis et peut se révéler fastidieux, car il nécessite plusieurs phases de remaniements manuels, même pour les créateurs les plus chevronnés.

Avec Project Magnetic Type, chacun peut associer et fusionner instantanément une forme, même un prototype de calligraphie dessiné à la main, avec un extrait de texte digital dynamique. Notre technologie assure l’assemblage fluide des formes et du texte, sans trahir l’esthétique du texte d’origine ni altérer ses propriétés de modification. S’appuyant sur des modèles de détection d’objet, cette technologie facilite l’extraction de lettres ornées à partir d’une image calligraphique, lesquelles peuvent être combinées à un texte dynamique pour obtenir un aspect analogue. Elle confère une certaine souplesse dès lors qu’il s’agit d’associer et de dissocier des formes ou des objets, et stimule encore davantage la créativité lors de la conception de contenus de type texte, comme des logos ou des publicités.

Biographie de la présentatrice : computer scientist chez Adobe, Arushi Jain se passionne pour les fonctionnalités en lien avec la typographie, en particulier lorsqu’il est question de polices, de glyphes et de magnétisation d’objets vectoriels.

Project Vector Edge

L’une des difficultés couramment rencontrées par les graphistes réside dans leur incapacité à se représenter ce que donneront ces contenus en conditions réelles (sur un panneau d’affichage, un t-shirt ou une tasse à café, par exemple).

Project Vector Edge donne à ces créateurs et à leurs équipes les moyens de visualiser, d’apporter des modifications et de collaborer sur leurs créations 2D dans des environnements 3D durant la phase de création. Ce projet fait appel à des technologies d’IA et de projection d’illustrations vectorielles pour projeter automatiquement les contenus 2D sur des surfaces au sein d’environnements 3D, à l’échelle et en haute résolution, de sorte que les créateurs et les différentes parties prenantes puissent visualiser ce à quoi ressemblera le projet définitif.

Biographie du présentateur : senior computer scientist chez Adobe, Ankit Phogat travaille sur diverses technologies, comme les outils Dégradé de forme libre, Déformation de la marionnette et 3D.

Project Motion Mix

Vous avez envie de créer une vidéo virale et qualitative de vous esquissant quelques pas de danse pour vos réseaux sociaux ? Avec Project Motion Mix, les créateurs peuvent facilement réaliser des animations en boucle accompagnées de mouvements réalistes, le tout à partir d’une image fixe.

Jusqu’à présent, la génération d’animations de ce type pour la vidéo se révélait très chronophage et délicate, les vidéastes devant capturer la singularité de chaque mouvement avant de pouvoir l’ajouter à leur animation. L’exercice est particulièrement difficile pour ceux qui s’évertuent à reproduire les mouvements d’un danseur professionnel. Project Motion Mix réalise permet d’automatiser le processus grâce à des technologies de rendu humain et de génération de mouvements basées sur l’IA afin de simuler une mobilité 3D réaliste d’excellente qualité. Les créateurs ont aussi la possibilité d’inviter un ami à participer à leur animation ou à modifier l’arrière-plan.

Biographie du présentateur : Jae Shin Yoon est research scientist chez Adobe. À travers ses recherches, il s’efforce de résoudre la problématique de la reconstruction et de la généralisation de l’humain numérisé dans le temps, en misant sur la modélisation, le rendu et l’adaptation de l’homme via le prisme d’une caméra unique. Il mobilise, à cet effet, ses connaissances en vision artificielle, en infographie et en Machine Learning.

Project Blink

Qui n’a jamais rêvé de faire une recherche précise pour trouver le moment parfait d’une vidéo et ainsi le transformer en capsule vidéo pour le partager ?

Project Blink, nouvel outil de montage vidéo qui fait appel à l’IA pour aider les utilisateurs à trouver et extraire en un clin d’œil les temps forts d’un contenu vidéo. Project Blink permet de modifier une vidéo aussi facilement qu’un document texte, puisque notre technologie transforme le contenu d’une vidéo en transcription de texte. Désormais, pour créer des séquences à partir de vidéos longues, il suffit aux utilisateurs de rechercher des termes, objets, sons ou types d’activités spécifiques et de sélectionner la partie de la transcription dont ils souhaitent se servir. Notre technologie transformera ensuite automatiquement le passage en question en une nouvelle séquence.

Project Blink est disponible dès maintenant en bêta. Si vous souhaitez tester cette technologie sans plus attendre, inscrivez-vous ici pour accéder à la version bêta.

Biographie du présentateur : Mira Dontcheva est principal scientist and research manager chez Adobe où elle dirige des recherches sur l'interaction homme-machine (IHM). Ses recherches portent sur la création de nouveaux outils qui facilitent les tâches créatives, les rendent plus ludiques et plus accessibles au public.

Project Artistic Scenes

Le métavers a ouvert de nouveaux horizons à ceux qui s’intéressent au développement de contenus 3D immersifs. Néanmoins, la création de contenus artistiques 3D exige demande énormément de temps et requiert des compétences particulières.

Project Artistic Scenes se sert de l’IA pour transformer automatiquement des scènes 3D dans le style des illustrations 2D. Les créateurs peuvent ainsi développer en un clin d’œil du contenu 3D pour créer des expériences en réalité virtuelle et en réalité augmentée. À la différence des techniques stylistiques traditionnelles, qui transforment uniquement les images, notre approche transforme la scène 3D dans son intégralité. Elle permet de retranscrire une scène 3D (une aire de jeu, par exemple) dans un style artistique particulier, comme celui d’une aquarelle, avec des détails stylistiques réalistes (les coups de pinceau notamment) garantissant une expérience 3D artistique totalement immersive.

Biographie du présentateur : Sai Bi est research scientist chez Adobe. Il axe ses travaux de recherche sur des thèmes tels que l’acquisition de l’apparence, la reconstruction 3D, le rendu inverse et le rendu neuronal.

Project All of Me

Si le recadrage d’une image peut être un jeu d’enfant, l’agrandir pour l’extraire de sa zone de recadrage peut tenir de la gageure, voire sembler purement et simplement impossible !

Avec Project All of Me, du créateur de mode qui doit actualiser les modèles de sa nouvelle collection présentés sur son site à l’étudiant désireux de réaliser un flyer pour un évènement, cet éditeur de portraits photo intelligent tire parti de l’IA pour générer des versions non recadrées de clichés. Il est également possible d’éliminer les éléments indésirables, et même formuler des recommandations et modifier la tenue vestimentaire du sujet de la photo.

Biographie de la présentatrice : research scientist chez Adobe, Qing Liu travaille sur la génération et l’interprétation d’images basées sur le deep learning.

Project Beyond the Seen

Vous avez toujours rêvé de créer des expériences immersives 360° à partir d’images ordinaires ? Vous pourriez revivre des vacances en famille ou développer un nouvel univers pour le métavers.

Repoussant les limites de la réalité virtuelle immersive, Project Beyond the Seen donne aux utilisateurs les moyens d’accomplir ce dont nos technologies d’IA s’acquittent aisément, à savoir générer des panoramas 360° à partir d’une seule image. Les méthodes d’estimation de la profondeur leur permettent d’étendre l’image panoramique créée pour composer des environnements 3D réalistes totalement immersifs. Les utilisateurs ont la possibilité d’ajouter des objets plus rapidement et plus facilement, puisque notre technologie d’IA est capable de générer du contenu derrière, au-dessus, en dessous et sur les côtés de l’image, et permet notamment d’intégrer des reflets.

Biographie du présentateur : Yannick Hold-Geoffroy est engineer et scientist chez Adobe. À l’origine d’une quarantaine d’articles scientifiques et brevets dans les domaines de l’analyse d’images et de la reconstruction 3D, il a beaucoup contribué, entre autres, à la fonctionnalité Adapter à l’image d’Adobe Stager et à l’infrastructure des Neural Filters de Adobe Photoshop.

Project Made in the Shade

Dans les applications de retouche d’image classiques, la modification des ombres et de leurs interactions avec les formes est difficile et fastidieuse. Project Made in the Shade se sert de l’IA pour faciliter la retouche d’images 3D et la rendre intuitive en éliminant la complexité inhérente à l’ajout d’ombres. Puisque notre technologie traite la profondeur, l’éclairage et les autres aspects d’une scène, les utilisateurs peuvent à présent déplacer une personne ou un objet dans une photo et créer des simulations d’ombres réalistes. Chacun, amateur ou professionnel, est donc en mesure de décaler aisément des personnes ou des objets photographiés avec leurs ombres lors de la composition d’images 3D ou de la création d’animations graphiques 3D.

Biographie du présentateur : Vojtech Krs est research engineer chez Adobe. Ses domaines de prédilection en recherche et en ingénierie incluent les outils de création, l’imagerie numérique et les illustrations 3D en temps réel. Il n’hésite pas à enchaîner les heures de programmation et de formation pour créer un art digital qui lui ressemble.