Références vidéo pour l’IA : choisir actions, mouvements de caméra et clips 3D simples

Lisez le clip en entier pour observer le début, le déroulement et la fin du mouvement. Ces clips de référence générés par IA dans un style pâte à modeler se lancent avec les commandes du lecteur.

Ces clips illustrent les éléments à examiner. Avant de les utiliser, vérifiez les exigences d’entrée de votre outil : le contrôle du mouvement d’un personnage peut ne pas prendre en charge les voitures ni les interactions entre deux personnes.

Un rendu en pâte à modeler utilise des modèles simples pour représenter le mouvement, la disposition et les mouvements de caméra. L’IA peut produire un résultat similaire sans projet 3D modifiable. Une vidéo de profondeur représente la distance par rapport à la caméra ; l’éclairage et les ombres sur une surface grise ne constituent pas de la profondeur. Nommez les versions séparément et consignez leur source.

Après avoir choisi une référence, préparez les éléments d’entrée en suivant les instructions de votre plateforme. Ces liens renvoient aux guides propres à chaque plateforme.

• Kling : guide de contrôle du mouvement des personnages — Images de personnages et vidéos de référence de mouvement.
• Higgsfield : utiliser le contrôle du mouvement Kling sur sa plateforme — Images de personnages, références de mouvement et cadrage ; vérifiez la version utilisée.
• LTX : contrôle de la profondeur, de la pose et des contours — Workflow destiné aux modèles open source concernés, et non une option d’importation universelle.

Un clip contient plusieurs types d’informations. Déterminez lequel compte pour ce plan.

Appuyez-vous sur ce tableau pour choisir un clip, puis vérifiez les formats pris en charge par votre outil. Une image de personnage montre son apparence ; une vidéo de mouvement montre comment il bouge.

Le terme vidéo-à-vidéo désigne généralement la génération ou la modification d’images à partir d’une vidéo existante. Les workflows avec référence de mouvement visent à reprendre une performance ou un mouvement, souvent avec une entrée distincte pour le personnage. Certains outils proposent une fonction séparée pour chaque tâche.

Par exemple, Runway Act-Two associe une vidéo de performance à une image ou une vidéo du personnage. Les éléments contrôlables dépendent du type de fichier de personnage choisi.Documentation de Runway

Avant de découper un clip, vérifiez à quel endroit l’outil vous demande de l’importer.

Une scène 3D simple permet de placer les objets et de planifier le mouvement de caméra avant d’ajouter des détails. Des formes basiques peuvent représenter une table et un produit tandis que la caméra passe à côté. Exportez la scène en vidéo pour vérifier quand le produit entre dans le cadre et où il se retrouve.

Seedance 2.5 explique qu’une vidéo 3D simple, sans détails de surface, peut guider le placement des objets, les poses, les mouvements et les angles de caméra. Les mouvements complexes peuvent néanmoins différer de la référence.Présentation de Seedance

Que vous créiez la scène vous-même ou avec l’aide d’un outil d’IA, vérifiez la vidéo exportée pour contrôler la position de la caméra, le mouvement et le rythme. Organisez ces vidéos dans ShotMind et gardez les fichiers du projet 3D dans votre logiciel de modélisation. Ces vidéos simples contenant moins de détails visuels, testez la recherche avec vos propres séquences. Vous pouvez aussi parcourir et lire les clips pour en choisir un.

Supposons que vous vouliez générer avec l’IA une personne qui tend naturellement la main vers une tasse. Retrouvez un geste similaire dans une vidéo enregistrée, découpez le passage et utilisez-le dans un outil prenant en charge les références de mouvement.

1. Importez votre vidéo enregistrée dans ShotMind.Utilisez des séquences que vous possédez ou êtes autorisé à gérer. ShotMind détecte les plans ; vous choisissez ceux à analyser. Si la vidéo a déjà été analysée, passez directement à la recherche.
2. Recherchez l’action dont vous avez besoin.Par exemple, saisissez « une personne tend la main vers une tasse posée sur une table » pour trouver des correspondances possibles dans les plans analysés.
3. Lisez le clip et vérifiez l’action dans son intégralité.Vérifiez le geste — tendre la main, saisir et soulever — ainsi que la visibilité de la main. Une image ressemblante ne suffit pas ; regardez le mouvement du début à la fin.
4. Découpez la référence dans votre logiciel de montage vidéo.Ouvrez la vidéo d’origine dans votre logiciel habituel, gardez l’action souhaitée et respectez la durée ainsi que le format d’image requis par l’outil de génération.
5. Importez-la dans votre outil de génération.Choisissez une fonction qui accepte les références de mouvement. Importez la vidéo découpée, ajoutez l’image du personnage, le texte ou les autres éléments demandés, puis lancez la génération. Retrouvez les séquences dans ShotMind et créez la nouvelle vidéo sur la plateforme choisie.
6. Enregistrez la référence et le résultat.Notez dans vos dossiers ou dans un tableur quelle référence correspond à chaque résultat. Vous pourrez ainsi la retrouver lorsque vous chercherez une action similaire.

Décrivez l’image que vous souhaitez retrouver. Ces exemples vous donnent un point de départ ; adaptez la personne, l’action ou le lieu à votre recherche.

• Action :Une personne tend la main vers un objet posé sur une table, avec un mouvement de la main bien visible.
• Caméra :La caméra passe à côté du sujet et dévoile progressivement l’espace situé derrière lui.
• Ambiance :Un décor industriel aux tons froids, une forte lumière latérale et des mouvements retenus.
• Composition :Une personne de petite taille dans un vaste espace, entourée d’une grande zone de vide.

Un résultat peut ne correspondre qu’à une partie de votre description. Lisez-le avant de le choisir, surtout si vous recherchez une direction de caméra précise ou une action complète.Apprenez à organiser et rechercher des références vidéo

Les vidéos complètes restent sur votre Mac. Seuls les plans que vous choisissez d’analyser sont envoyés dans le cloud. Les résultats et les aperçus sont enregistrés sur le Mac pour consultation et recherche ultérieures. Parcourir et rechercher le contenu analysé ne consomme aucun crédit (Points) ; l’analyse de nouveaux plans en consomme.

ShotMind vous aide à gérer et retrouver vos références. La génération, les paramètres du personnage et ceux de la plateforme restent dans votre outil de génération.