Runway, l’une des premières plateformes de génération de vidéos avec IA disponibles publiquement, a lancé Gen-3 Alpha, son modèle d’intelligence artificielle le plus récent. Ce modèle permet de générer des clips vidéo à partir de descriptions textuelles et d’images fixes, et promet une amélioration notable de la vitesse et de la fidélité par rapport à son prédécesseur, Gen-2. Parmi ses caractéristiques les plus remarquables, Gen-3 Alpha offre un contrôle précis sur la structure, le style et le mouvement des vidéos, étant capable de créer des personnages humains expressifs avec différentes actions, gestes et émotions.
Selon un article de blog de Runway, le modèle a été conçu pour interpréter une large gamme de styles et de terminologie cinématographique, facilitant « des transitions imaginatives et des cadrages précis des éléments de la scène ». Cependant, le modèle présente actuellement plusieurs limitations, telles que la durée maximale des vidéos générées, qui est actuellement de 10 secondes.
Le cofondateur de Runway, Anastasis Germanidis, a souligné lors d’une interview avec TechCrunch que ceci est seulement le premier d’une série de modèles générateurs de vidéos qui seront lancés dans le futur. De plus, il a expliqué que les temps de génération de Gen-3 sont significativement plus rapides que ceux de Gen-2 : un clip de 5 secondes est généré en 45 secondes, tandis qu’un clip de 10 secondes prend 90 secondes.
L’entraînement du modèle a été réalisé avec une grande quantité de vidéos et d’images, bien que Runway n’ait pas révélé l’origine exacte de ces données. Ce secret est assez courant de nos jours parmi les entreprises d’IA, principalement en raison des éventuels problèmes juridiques liés à la violation de la propriété intellectuelle auxquels elles pourraient être confrontées en utilisant des données publiques (y compris du matériel protégé par des droits d’auteur).
Runway affirme avoir partiellement abordé cette problématique en collaborant avec des artistes pour développer le modèle. Dans une interview précédente avec TechCrunch, Germanidis a souligné qu’ils « exploraient plusieurs partenariats de données pour continuer à croître » et améliorer leurs modèles. De plus, Gen-3 Alpha disposera d’un système de modération pour bloquer la génération de vidéos avec des images protégées par des droits d’auteur et du contenu inapproprié. Un système de provenance conforme à la norme C2PA sera également mis en place pour authentifier la provenance des vidéos.
Gen-3 Alpha sera disponible dans quelques jours pour les abonnés à Runway, y compris les clients d’entreprise et les participants au programme de partenaires créatifs de la société.
