Google expérimente un projet d’IA qui transforme les pages Web en vidéos. Il n’est pas encore disponible pour un usage public, mais c’est un projet intéressant. Son nom est URL2Video et son fonctionnement est basé sur l’extraction de texte, images, polices, couleurs et autres éléments clés, qui sont sélectionnés et édités de manière autonome par l’application.
Le mécanisme de fonctionnement de cet outil a été conçu dans Google sur la base de l’expérience transmise par des concepteurs familiers à la fois des œuvres audiovisuelles et de la conception Web. De cette façon, certains styles généraux de l’édition ont été définis, en tenant compte des critères de sélection et de la hiérarchisation du contenu.
Pour utiliser URL2Video, qui est davantage un prototype de recherche, il est nécessaire de fournir le début de l’URL avec laquelle vous souhaitez travailler. De là, les éléments seront sélectionnés, grâce au mécanisme automatique mentionné ci-dessus. La conception du clip généré sera cohérente avec l’apparence du site Web.
Après traitement de ces premières données, il sera demandé à l’utilisateur de définir certains paramètres, tels que la durée prévue de la vidéo et son rapport hauteur / largeur. Avant le rendu final du clip généré, l’interface utilisateur de cette application permet à l’utilisateur de modifier certains éléments, tels que certains attributs de conception (couleurs, polices, etc.). Après les premiers tests, Google fait une évaluation positive des résultats obtenus jusqu’à présent avec URL2Video.
«Nous développons de nouvelles techniques qui prennent en charge la piste audio et une voix off dans le montage vidéo. Dans l’ensemble, nous envisageons un avenir où les créateurs se concentrent sur la prise de décisions de haut niveau et un modèle ML suggère de manière interactive des modifications temporelles et graphiques détaillées pour une création vidéo finale sur plusieurs plates-formes. ont déclaré Peggy Chi et Irfan Essa, du personnel de recherche de Google.
Dans l’interface de création URL2Video, les utilisateurs spécifient l’URL, la taille de la page vue cible et les paramètres de sortie vidéo. URL2Video analyse le site et en extrait les principaux composants visuels. Il crée une série de scènes et affiche les images clés sous forme de storyboard. Ces composants sont transformés en une vidéo de sortie qui répond aux contraintes temporelles et spatiales d’entrée. Les utilisateurs peuvent lire la vidéo, examiner les attributs de conception et effectuer des ajustements pour générer des variations vidéo, telles que la réorganisation des scènes.
URL2Video a été présenté au symposium sur les logiciels et la technologie UI 2020. Au niveau du prototype, un article précise les principaux détails techniques développés lors de la phase de recherche de ce projet.
En plus d’être une démonstration remarquable du potentiel de l’intelligence artificielle, cet outil pourrait à l’avenir être consolidé comme une excellente alternative pour générer automatiquement du matériel audiovisuel pour commercialiser le contenu de certains sites.
Google expérimente un projet d’IA qui transforme des pages Web en vidéos, il n’est pas encore ouvert au public. Mais c’est un projet passionnant pour nous tous.
