Introduction aux outils de l'Intelligence Artificielle (IA) pour les métiers de l'audiovisuel

Jour 1

Origines et fondements de l'Intelligence Artificielle (IA)

• Historique depuis l'ère du père fondateur de l'IT et l'IA : Alan Turing
• Possibilités et limites de l'IA dans le graphisme, la photo et la vidéo
• Apprentissage automatique, Deep Learning
• Principaux algorithmes : réseaux de neurones, arbres de décision...

Maîtrise des concepts et manipulation des outils d'IA, workflow

• Les différents types d'IA : text-to-text, text-to-image (ou video)
• Image-to-text : utiliser une source d'image pour améliorer la génération
• Prompts avancés, reformulation, perfectionnement et optimisation de la rédaction des prompts
• Compréhension des langages, de la réalisation et de la direction photo pour mieux prompter (mise en scène, optiques, capteurs, perspectives, points de vue...)
• Prompts négatifs, itération, concaténation, combinaison, modération, blend
• Optimisation des workflows de post-production
• Mise en place d'une veille technologique sur l'IA

Préparation de la narration

• Accompagnement à l'écriture des dossiers de production
• Développement des scénarios, écriture des dialogues, direction artistique
• Préparation des storyboards, moodboards et schémas de situation

Génération graphique

• Outils : Pika, DALL-E, Midjourney, Krea (temps réel), Leonardo
• Définition d'un style graphique
• Récurrence des visuels pour assurer la cohérence narrative
• Variations, stylisations, remix, chaos et utilisation d'archétypes
• Scaffolding : transformation de croquis en images réalistes
• Reconstruction d'images (inpainting) et complétion (outpainting)
• Génération depuis des images ou dessins
• Récupérer les expressions d'un visage

Cas particulier de Stable Diffusion

• Outil Open Source à fonctionnement local ou dans le Cloud
• Interfaces : Stability Matrix, Fooocus, Automatic1111, ComfyUI (nodale)
• Animation avec Stable Video Diffusion et AnimateDiff
• ControlNet : réseau de neurones avec conditions supplémentaires
• OpenPose (récupération de poses depuis des images ou croquis)

Génération vidéo

• Outil PixVerse
• Animation d'images (dont animations faciales)

Exemples de travaux pratiques (à titre indicatif)

• Optimiser un prompt pour la création d'une image
• Créer deux images à l'aide de deux outils différents

Jour 2

Génération et traitements sonores avec l'IA

• Outils : ElevenLabs, Suno, Lalamu, D-ID, PlayHT, MusicFX, Magnet
• Création et synthèse sonore
• Génération de voix off - notions de direction artistique pour bien diriger la voix
• Composition musicale complète
• Sound design

Réparation, nettoyage et amélioration des images et du son

• Outils : Magnific AI, Pika, Topaz (upscaling)
• Amélioration de la réduction : upscaling
• Réduction du bruit
• Accentuation et ajouts de détails (dont sketch et inpaint sketch)

Montage accompagné par l'IA

• Outil Runway : génération, effets, tracking, timelapse, sous-titres
• Aide au dérushage et classements automatiques
• Synchronisation labiale (lip syncing)
• Inversion de visages (face swapping)

Adobe Photoshop, Illustrator et Firefly

• Génération d'images et agrandissements assistés par IA
• Aide à la sélection d'objets et de ciels (cutout), suppression d'éléments et correction d'images
• Effets, Neural Filters, simulation de profondeur de champ (flou de profondeur - Bokeh)
• Génération d'images vectorielles (à partir de prompts ou d'images bitmap)

Autres outils et utilisations de l'IA

• Présentation dynamique avec D-ID
• Hugging Face : plateforme de Machine Learning avec des modèles pré-entrainés et personnalisables
• Plateforme de partage et découverte des modèles d'IA

Ethique et droits

• Propriété intellectuelle, copyright, jurisprudence
• Vie privée
• Tokens

Exemples de travaux pratiques (à titre indicatif)

• Améliorer quelques images via des outils IA
• Exercice pratique de modification d'âge
• Générer une vidéo courte selon un schéma dirigé

Le contenu de ce programme peut faire l'objet d'adaptation selon les niveaux, prérequis et besoins des apprenants.

Modalités d’évaluation des acquis

• En cours de formation, par des productions
• Et, en fin de formation, par un questionnaire d'auto-évaluation