Générer automatiquement des résumé de news

Les vidéos résumant une actualité sont utilisées dans tous les journaux pour nous permettre de comprendre un sujet rapidement. Pourtant, ces vidéos peuvent être répétitives à monter. C’est pour cela que l’équipe du moteur de recherche chinois Baidu, Inc a créé un algorithme capable de résumer ces sujets en une vidéo de quelques minutes.

Comment ça marche ?

À partir d’un simple lien vers une page web, VidPress récupère le contenu d’une page puis utilise du NLU (Natural Language Understanding) pour comprendre le sujet de l’article présenté. Ensuite, l’algorithme agrège d’autres sources sur le même sujet avant d’exécuter les deux 2 tâches suivantes en parallèle :

• Une recherche d’images et de vidéos en lien avec le sujet à partir de leur banque d’image et des résultats du moteur de recherche.
• La génération du récit de la vidéo et la transformation en voix.

Enfin, un dernier algorithme vient aligner l’audio et la vidéo pour créer une vidéo sans interruption.

Les résultats :

• 9 minutes suffisent pour créer une vidéo de 2minutes 30 contre 15 minutes pour un homme !
• Une augmentation de 15% du taux de complétion (Pourcentage de temps passé sur une vidéo par rapport au temps total)
• Une vidéo cumule plus de 850 000 vues