---La création de vidéos avec l'IA générative est une avancée technologique majeure qui transforme la manière dont les vidéos sont produites.
---DEUX FAÇONS DE CREER DES VIDEOS AVEC L'I.A.-
---SAISIR UN 'PROMPT' POUR DÉCRIRE LA VIDÉO SOUHAITÉE-
L'I.A. générative permet de créer des vidéos à partir de simples descriptions textuelles, de modèles 3D, ou même de croquis. Voici un aperçu des aspects clés de cette technologie.
---TÉLÉVERSER UNE IMAGE ET DEMANDER À L'I.A. DE L'ANIMER-
Demander à l'I.A. d'animer une image statique.
Ci-dessous vous pouvez découvrir des outils et des projets qui explique ce qui est possible en ce qui concerne la création des vidéos avec l'IA.
-- CE QUI FONT LES PROFESSIONELS AVEC L'IA
-- ADOBE PREMIER PRO -
Avant d'explorer ci-dessous ce qui est réalisable en matière de génération et manipulation de vidéo à domicile avec des outils d'IA accessibles ou gratuits, cette vidéo démontre les possibilités offertes par des outils professionnels tels qu'Adobe Première Pro.
Les outils professionnels commencent à être disponible sur nos ordinateurs et nos smartphones.
-- CE QU'ON PEUT FAIRE CHEZ SOI
-- ARTHUR DUFOUR -
-- PRÉSENTATION DU PRÉSENTATION DU PROJET VIDÉO IA D'ARTHUR DUFOUR
Arthur Dufour a récemment créé un mini court-métrage entièrement généré par l'intelligence artificielle, intitulé "Apocalypse à San Francisco". Son ambition est de démontrer le potentiel des technologies IA dans la production vidéo, en réalisant chaque aspect du film – des plans vidéos à la bande son – à l'aide d'outils innovants.
-- POUR RÉALISER CE PROJET, ATHUR A SUIVI PLUSIEURS ÉTAPES :
- Scénario
Utilisation de ChatGPT pour élaborer un scénario captivant.
- Création de l'image de base et amélioration
Utilisation de Midjourney et Magnific pour générer et améliorer l'image initiale.
- Transformation de l'image en vidéo
Application de Haiper et Runway pour convertir l'image en séquences vidéo.
- Script et voix off
Génération du script et de la voix off avec ChatGPT et ElevenLabs.
- Bruitages
Création des effets sonores avec ElevenLabs (Sound Effects).
Si vous utilisez Pika les bruitages peuvent être ajouter dans l'application.
- Bande son
Production de la musique de fond via Udio, préféré par Arthur à Suno malgré des opinions partagées à l'agence.
Enfin, Arthur a assemblé tous ces éléments avec le logiciel de montage CapCut, réalisant ainsi son court-métrage avec succès. Son projet suscite désormais l'intérêt pour une version long métrage.
-- TROIS I.A. UN PROMPT. TROIS RÉSULTATS.
Ci-dessous, j'ai invité plusieurs plateformes IA à générer une courte vidéo en contre-plongée d'une forêt au crépuscule.
Voici les résultats.
Un plan en contre-plongée à ras du sol se déplaçant à travers une forêt au crépuscule. Éclairage cinématographique.
Un plan en contre-plongée à ras du sol se déplaçant à travers une forêt au crépuscule. Éclairage cinématographique.
Un plan en contre-plongée à ras du sol se déplaçant à travers une forêt au crépuscule. Éclairage cinématographique.
Un plan en contre-plongée à ras du sol se déplaçant à travers une forêt au crépuscule. Éclairage cinématographique.
-- CRÉATION DES ÉLÈVES LEONARDO.AI
Les animations et vidéos ci-dessous ont été créées par les élèves du collège Maria Casarès (REP+) à Lyon dans le cadre du projet www.CiNEMiA.fr en utilisant www.Leonardo.ai
Ils ont travaillé en équipe, dessinant et écrivant sur papier leurs intentions cinématographiques en anglais.
Ensuite, l'enseignant a saisi leurs phrases dans Leonardo.ai pour voir les résultats, et les élèves ont ensuite peaufiné leurs phrases jusqu'à ce que les images générées correspondent à leurs intentions artistiques.
Les élèves ont travaillé en groupe pour imaginer les personnages (héros, méchants, protagonistes, antagonistes...) en analysant les tropes du genre. Ensuite, ils ont rédigé en anglais des "prompts" que l'enseignant a ensuite saisi sur www.leonardo.ai
-- LE PROCESSUS WWW.CiNEMiA.FR
-1- Les élèves analysent les films, les super-héros et les dystopies existants.
-2- Ils imaginent leur propre scénarios, personnages et univers.
-3- Les élèves rédigent des 'prompts' pour des I.A. génératives.
-4- Leurs idées commencent à exister en image, vidéo et musique grâce à l'IA, notamment www.Leonardo.ai
-- EN JUIN 2024 : UN OUTIL QUI BASCULE TOUT !
-- LUMA AI -
Luma propose 30 générations gratuites par mois et avec un peu d'anticipaiton et organisation, 30 générations va permettre beaucoup de créativité avec un outil très performant.
Chaque génération dure 5 secondes et le tout est piloté avec une interface très simple.
Avant juin 2024, cette page de iAEducative.fr présentait principalement les animations et vidéo possible avec Runway et Pika à partir des images générées sur Midjourney ou autre.
Il suffisait de télécharger une image et demander à Runway ou à Pika de l'animer.
Depuis Juin, Luma propose des animations GRATUITEMENT et elle sont beaucoup plus dynamiques et réalistes.
Cette démonstration a été proposé par Nicolas Guyon.
Ce festival de Métal a été créé avec Luma.ai en quelques étapes.
Les images ont été générées avec Midjourney et puis animées avec Luma.
Cette vidéo vous êtes proposée par Hedy Magroun.
-- CONSOMMATION D'EAU ET D'ÉLÉCTRICITÉ
L'utilisation croissante de l'eau par l'IA est préoccupante.
La rareté de l'eau est un défi mondial pressant, aggravé par la croissance démographique, l'épuisement des ressources et des infrastructures vieillissantes, surtout dans les régions sujettes à la sécheresse. Il ne s'agit pas seulement de la quantité d'eau utilisée par les modèles d'IA, mais de la réponse des développeurs face à cette crise. Les tensions entre centres de données d'IA et communautés locales pourraient augmenter, entraînant des turbulences sociales.
Par conséquent, en cours, j'insiste sur un processus minutieux de rédaction et de réécriture sur papier afin qu'une seule vidéo soit créée qui est en adéquation avec l'intention artistique des élèves car tous les éléments (type de plan, style, mouvement, vitesse, éclairage, atmosphère...) ont été anticipés sur une feuille manuscrite.
-- OUTILS - CRÉATION D'IMAGES EN DE VIDÉOS ANIMÉES
-- LEONARDO.AI -
Leonardo et ses Nouveautés
Découvrez la dernière mise à jour de Leonardo avec l'arrivée de la fonctionnalité Character Reference et une refonte totale de l'interface de génération d'image.
Nouvelle Interface : Une expérience utilisateur optimisée pour sélectionner rapidement les options de guidance d'image.
Qualité Améliorée : Les modèles XL et Lightning offrent des rendus encore plus réalistes et impressionnants.
Fonctionnalités Premium : Accès aux fonctionnalités premium de la V2 pour tous les utilisateurs jusqu'au 30 mai. Ne manquez pas cette opportunité !
Curieux de voir le Character Reference en action ? Tout est montré dans cette vidéo signée Pierrick Chevalier.
-- OUTILS - CONVERTIR IMAGES EN VIDÉO ANIMÉE
-- HAIPER.AI -
Découvrez Haiper AI
Haiper AI, un nouveau générateur vidéo doté de capacités de transformation texte-en-vidéo et image-en-vidéo, pour créer des vidéos animées en 3D.
Haiper AI est un outil qui vous permet de créer du contenu vidéo en transformant vos descriptions textuelles en vidéos HD magnifiques simplement en fournissant un prompt. Cette fonctionnalité est connue sous le nom de Texte en Vidéo.
Haiper AI peut également donner vie à vos images avec des animations. Grâce à cette capacité, vous pouvez insuffler de la vie à vos images statiques, une fonctionnalité appelée Image To Vidéo.
Haiper AI peut être utilisé pour créer des films, des documentaires ou des animations pour raconter votre histoire. Vous pouvez également créer des vidéos promotionnelles convaincantes et persuasives pour captiver votre audience.
-- OUTILS - TEXT TO VIDEO / IMAGE TO VIDEO AVEC PIKA -
Pika est une plateforme de génération de vidéos par intelligence artificielle, permettant de créer des vidéos à partir de textes, d'images ou de vidéos existantes.
Pika simplifie le processus de création vidéo grâce à une interface intuitive et des algorithmes puissants.
On peut même inclure des bruitages automatiques générées par l'IA en fonction des images.
-- OUTIL - CRÉATION DES BRUITAGES - ELEVEN LABS -
La création d'effets sonores à partir de texte est arrivée. Le dernier modèle audio d'IA de Eleve Labs génère des effets sonores, des pistes instrumentales courtes, des paysages sonores et une grande variété de voix de personnages, le tout à partir d'un simple prompt textuel. Désormais disponible pour tous les utilisateurs.
Des créateurs de contenu aux développeurs de jeux vidéo, en passant par les studios de cinéma et de télévision, tout le monde utilise des effets sonores pour créer un contenu riche et immersif. Désormais, en plus des voix off générées par l'IA, vous pouvez produire tous les sons dont vous avez besoin avec un simple prompt.
Tout ce que vous entendez dans cette vidéo a été généré par les modèles de sons et de voix d'ElevenLabs. Nous avons partagé quelques extraits supplémentaires pour montrer l'étendue des capacités de ce nouveau modèle.
Merci à nos partenaires Shutterstock, qui ont fourni des pistes sous licence issues de leur vaste et diversifiée bibliothèque audio pour aider à créer notre modèle.
-- EXEMPLE - PAUL TRILLO - DES EXPERIMENTATIONS AVEC SORA AI -
Quelques vidéos produites par Paul Traillo sur Sora d'Open AI.
-- EXEMPLE - PAUL TRILLO - "TED 2024" -
Vidéo pour TED2024 : Une Réalisation 100% Générée par l'IA
Cette vidéo pour TED2024 a été entièrement générée par l'intelligence artificielle en utilisant Sora, le modèle texte-vidéo développé par OpenAI. Sora, un modèle d'IA encore non commercialisé, transforme des instructions textuelles en vidéos réalistes et imaginatives.
Acclaimed filmmaker Paul Trillo a eu accès en avant-première à Sora, juste avant la conférence TED2024.
"À quoi ressemblera TED dans 40 ans ?"
Le film est une collaboration innovante entre Paul Trillo et Sora. Cette année marque le 40e anniversaire de TED. Plutôt que de se tourner vers le passé, TED a demandé à Sora de nous montrer ce que les 40 prochaines années pourraient réserver.
Processus de Création avec Sora
Grâce à Sora, Paul Trillo a pu transformer des instructions textuelles en une séquence vidéo cohérente et visuellement impressionnante, capturant une vision futuriste de TED. À l'exception de l'animation du logo TED, toutes les séquences de cette vidéo ont été créées par l'IA.
-- EXEMPLE - PAUL TRILLO - "THE HARDEST PART" BY WASHEDOUT -
Après la vidéo pour les 40 ans de la conférence TED, le réalisateur Paul Trillo publie un nouveau clip réalisé avec l'outil text to video avec Sora d'OpenAI pour le groupe "Washedout"
-- EXEMPLE - NICK KLEVEROX - EXPERIMENTS IN SORA -
Présentation de la Vidéo de Native Foreign et leurs Expérimentations avec SORA
Native Foreign est une agence créative nommée aux Emmy Awards, basée à Los Angeles, Californie. Spécialisée dans le storytelling de marque, la conception de motion design et de titres, ainsi que les workflows génératifs d'IA, Native Foreign repousse les limites de la créativité avec Sora.
Nik Kleverov, co-fondateur de l'agence, utilise Sora pour visualiser des concepts et itérer rapidement sur des créations pour leurs partenaires de marque. Selon lui, les contraintes budgétaires ne doivent plus entièrement façonner la narration créative. "Je suis l'un de ces créatifs qui pensent en mouvement. Lorsque je suis dans Sora, j'ai vraiment l'impression de pouvoir donner vie à n'importe quelle idée", dit-il.
Grâce à Sora, Native Foreign peut expérimenter de nouvelles idées et techniques, transformant ainsi la manière dont ils abordent le storytelling visuel et le design. Cette vidéo présente certaines de leurs réalisations et démonstrations, illustrant le potentiel infini de la créativité assistée par l'IA.
-- EXEMPLE - LE COLIS DE LAURIE ZINGARETTI -
Présentation du Projet Vidéo IA de Laurie Zingaretti
Laurie Zingaretti est à la tête d'un projet utilisant l'intelligence artificielle pour révolutionner la création de vidéos.
Son travail se concentre sur l'intégration des technologies d'IA pour automatiser et améliorer divers aspects de la production vidéo, de la génération de contenu à l'édition finale.
Grâce à l'utilisation de plateformes telles que OpenAI, Runwayml, Suno AI, Resemble AI, Fable Motion, Midjourney, et Topaz Labs, Laurie parvient à créer des vidéos de haute qualité avec une précision et une efficacité remarquables.
Son projet démontre le potentiel de l'IA pour simplifier des tâches complexes. En combinant expertise technique et vision artistique, Laurie Zingaretti illustre parfaitement comment l'IA peut transformer la production vidéo en 2024.
-- EXEMPLE - C3PO x CHILDISH GAMBINO -
Grâce à l'IA, les créateurs disposent désormais de moyens innovants pour réaliser leurs projets.
Un exemple notable est l'œuvre "C3PO x Childish Gambino" de Daniel Eckler. Cette réalisation a été possible grâce à l'utilisation combinée de plusieurs outils : OpenAI, Runwayml, Suno AI, Resemble AI, Fable Motion, Midjourney et Topaz Labs.
-- EXEMPLE - STAR WARS VERSION 1960s -
1960s Star Wars
@abandoned movies sur Instagram s'amuse à convertir les films en version années 50 ou 60 et utilisant l'IA.
-- EXEMPLE - AUGUST KAMP - WORLDWEIGHT MUSIC VIDEO -
Clip Vidéo de "Worldweight" par August Kamp
Compositeur August Kamp a utilisé Sora pour créer un clip pour sa chanson 'Worldweight'.
-- EXEMPLE - DON ALLEN STEVENSON III - "BEYOND OUR REALITY" -
Présentation de la Vidéo "Beyond our Reality"
Dans cette bande-annonce, l'exploration d'un monde parallèle au-delà de notre réalité repousse les limites de l'imagination, donnant vie à des créatures rêvées par l'artiste. Ce que vous voyez n'est pas un film traditionnel, mais le résultat de la technologie vidéo générée par une IA de pointe, brouillant les lignes entre réalité et fantaisie. L'artiste a cherché à ancrer ses créations dans quelque chose de familier comme les animaux, tout en introduisant des créatures hybrides actuellement impossibles en biologie.
À mesure que nous entrons dans cette nouvelle ère, l'appréhension autour de l'évolution rapide de nos industries créatives est compréhensible. L'artiste pense que Sora offre un nouveau type de toile visuelle, élargissant ses possibilités créatives et complétant ses différentes techniques artistiques. En tant que studio créatif individuel, il y avait des limites inhérentes à ce qu'il pouvait créer seul. Avec Sora, il peut raconter des histoires à une échelle qu'il n'aurait jamais crue possible auparavant.
-- EXEMPLE - HEDY MAGROUN - "A.I. FRIDAY" -
La prolifique Hedy Magroun propose sur LinkedIn chaque vendredi une petite série d'images Midjourney animées avec différents outils tel que Stability AI SVD XT dans ComfyUI, Haiper et Runway, toujours upscalé avec Topaz Labs.
-- COMING SOON - GOOGLE VEO -
Présentation de Veo
Veo génère des vidéos de haute qualité en résolution 1080p dans une large gamme de styles cinématographiques et visuels, pouvant dépasser une minute. Grâce à une compréhension avancée du langage naturel et des sémantiques visuelles, il produit des vidéos qui représentent fidèlement la vision créative de l'utilisateur, en capturant avec précision le ton d'un prompt et en rendant les détails des prompts plus longs.
Le modèle offre un niveau de contrôle créatif sans précédent et comprend des termes cinématographiques tels que "timelapse" ou "prises de vue aériennes d'un paysage". Veo crée des séquences cohérentes et consistantes, où les personnes, les animaux et les objets se déplacent de manière réaliste dans les prises de vue.
-- COMING SOON - GOOGLE VIDS -
Google Vids bientôt disponible ?
https://workspace.google.com/products/vids/
Comment puis-je obtenir l'accès ?
Google teste actuellement cette nouvelle application avec un groupe restreint de testeurs de confiance dans Google Workspace Labs.
Quand cet outil sera-t-il disponible pour tout le monde ?
Google va itérer et affiner ces expériences à travers Workspace Labs avant de les rendre disponibles pour certains plans Gemini de Google Workspace.
Quand y aura-t-il plus de fonctionnalités alimentées par l'IA dans Google Vids ?
Google est ravi de partager sa vision pour Google Vids via son dernier blog ici. À mesure que Google Vids sera plus largement disponible, vous verrez un lancement régulier de ces fonctionnalités. Suivez le blog de Google Workspace pour suivre les derniers progrès et développements !
-- COMING SOON - SORA D'OPENAI -
11 minutes de présentation et d'analyse de Sora sur ARTE.
Fonctionnalité principale : Création de vidéos à partir de texte
Sora est un modèle d'intelligence artificielle capable de créer des scènes réalistes et imaginatives à partir d'instructions textuelles. Il peut générer des vidéos jusqu'à une minute de long tout en maintenant la qualité visuelle et en respectant les consignes de l'utilisateur.
Possibilités offertes
Sora permet de générer des scènes complexes avec plusieurs personnages, des mouvements spécifiques et des détails précis du sujet et de l'arrière-plan. Le modèle comprend non seulement ce que l'utilisateur demande dans le prompt, mais aussi comment ces éléments existent dans le monde physique. Sora peut également animer des images fixes, prolonger des vidéos existantes ou remplir des cadres manquants, offrant ainsi une grande flexibilité créative.
Disponibilité et tests
Actuellement, Sora est disponible pour les "red teamers" afin d'évaluer les risques et les dangers potentiels. OpenAI accorde également l'accès à plusieurs artistes visuels, designers et cinéastes pour obtenir des retours et améliorer le modèle. Cette approche vise à garantir que Sora est à la fois innovant et sûr pour une utilisation créative professionnelle.
Sécurité et amélioration continue
OpenAI travaille activement avec des experts en domaines comme la désinformation, le contenu haineux et les biais pour tester le modèle de manière adversariale. Des outils de détection sont en cours de développement pour identifier le contenu généré par Sora et assurer le respect des politiques d'utilisation.
-- COMING SOON - VIDU BY SHENGSHU -
La Chine et la Création de Vidéos avec Vidu
La Chine 🇨🇳, bien que moins médiatisée que les États-Unis 🇺🇸, progresse rapidement dans le domaine de l'intelligence artificielle, y compris la création de vidéos. Après les présentations de Sora d’OpenAI et Vasa-1 de Microsoft, le modèle Vidu se distingue par ses capacités avancées. Vidu génère des vidéos à partir de simples instructions textuelles, offrant des résultats époustouflants et réalistes.
Ce pays, malgré sa discrétion sur les résultats de ses recherches, dépose plus de 50 000 brevets annuellement selon l'Organisation mondiale de la propriété intellectuelle. Avec plus d'un million d'ingénieurs formés chaque année, dont beaucoup possèdent des doubles formations avec des instituts étrangers, la Chine est bien positionnée pour innover.
La production de puces, essentielles pour le traitement des données des outils d'IA comme Vidu, est également un domaine où la Chine investit massivement, en parallèle aux sollicitations importantes envers NVIDIA.
-- EN JUIN 2024 : LA CHINE PROPOSE KLING
-- KLING AI -
KLING n'est pas encore disponible en France mais ça va venir !
Kling est le nouveau modèle d'intelligence artificielle chinois qui a pris tout le monde par surprise.
Il se distingue par sa capacité à générer des vidéos de haute qualité d’une durée maximale de 2 minutes, une performance notable dans le domaine des IA génératives avec une cadence de 30 images par seconde en 1080p.
Ce modèle est en voie de devenir incontournable, offrant des fonctionnalités accessibles au grand public, bien que l'accès nécessite une inscription sur liste d’attente et un numéro de téléphone chinois.
Même avant la sortie de SORA, Kling s'impose déjà comme un sérieux concurrent. Il sera intéressant de le voir à l'épreuve.
Prompt :
Voyage en train, en admirant divers paysages à travers la fenêtre.
Pour plus d'exemples, visitez leur site :