Runway: Aleph 2.0

Aleph 2.0 est le modèle de modification vidéo en contexte de Runway. Il transforme des séquences existantes, filmées ou générées, à l’aide d’une instruction écrite et, éventuellement, d’images clés de guidage. Le processus prévu modifie la partie demandée d’une scène tout en préservant la composition, l’éclairage et les détails qui l’entourent. Il convient ainsi au remplacement d’un produit, au changement de tenue, à la transformation d’un arrière-plan, au rééclairage ou au changement de style visuel, sans recréer toute la scène à partir d’un brief textuel.

Commencez par une action directe et la transformation souhaitée : ajouter, supprimer, remplacer, changer, rééclairer ou modifier le style. Pour remplacer un produit, identifiez l’objet visible et décrivez son remplacement, puis précisez les mouvements de main et de caméra ainsi que le décor environnant à conserver. Pour une scène saisonnière, décrivez la météo ou la lumière à modifier. Une instruction concise et ciblée fournit un objectif de modification plus clair qu’une demande générale d’améliorer le clip entier.

Les images clés de guidage définissent l’aspect du résultat modifié à un instant particulier. Choisissez une image qui montre clairement la cible : une vue large pour changer l’arrière-plan, ou une vue plus rapprochée pour un petit détail ou un accessoire. Dans le processus Edit Studio de Runway, la modification d’une image fixe peut être prévisualisée et affinée avant que la version choisie guide la transformation vidéo. Comparez l’image modifiée avec la source pour les détails du sujet, les contours et les objets à préserver, puis utilisez-la comme direction visuelle du clip.

L’API du producteur prend en charge des vidéos sources de 2 à 30 secondes et jusqu’à cinq images clés facultatives placées à des instants précis. Associez chaque image de guidage au point prévu dans la source et préférez un petit nombre de changements clairs à une collection d’objectifs visuels contradictoires. Aleph 2.0 est distinct de l’ancien modèle Gen-4 Aleph ; le producteur identifie séparément son modèle API. Une modification guidée par des images clés diffère aussi d’une demande faite à un modèle texte-vers-vidéo de créer un plan sans rapport.

Les règles de préparation documentées d’Edit Studio utilisent des rapports largeur/hauteur classiques, une résolution source comprise entre 480p et 1080p et 24 à 30 images par seconde, avec au maximum dix coupes ou changements de plan. Le processus recommande des sources 720p ou 1080p ; dans cette interface, les séquences à plus de 30 images par seconde sont rééchantillonnées à une fréquence inférieure et les téléchargements de plus de 30 secondes sont raccourcis. Il s’agit des règles de préparation du processus de modification du producteur. Choisissez un segment source qui montre l’événement entier à modifier et dont le sujet reste visible là où le changement doit se maintenir.

Le modèle peut propager le changement d’un arrière-plan, d’un vêtement, d’un objet, d’une lumière ou d’un style sur toute la séquence. Une instruction de mouvement supplémentaire est utile lorsque la modification nécessite une nouvelle action absente de la source et qui ne découlerait pas de l’image clé seule, par exemple un effet visuel qui se développe au fil du temps. De nombreuses modifications ne nécessitent aucun brief de mouvement supplémentaire, car le modèle anime l’ajustement de l’image clé dans la scène existante. Décrivez précisément un nouveau mouvement et distinguez-le du changement visuel déjà défini par l’image clé.

Le processus de modification du producteur applique par défaut le changement à toute la vidéo et peut le limiter à une plage sélectionnée de la chronologie. Conservez le clip original afin de comparer le résultat choisi avec la source et de l’utiliser pour une reprise ciblée. Une revue pratique va au-delà de l’image choisie : vérifiez le début, le milieu, la fin, chaque coupe et la période où la cible est brièvement masquée. Le livrable utile est un clip révisé dont la transformation demandée reste cohérente dans le temps, tandis que les éléments importants qui devaient rester inchangés conservent leur rôle.

Le MP4 est le format par défaut pour la lecture et le partage. Le processus Edit Studio de Runway pour les vidéos complètes éligibles propose aussi ProRes sous forme de fichier MOV avec du son PCM, ou un ZIP d’images PNG individuelles pour la composition. Les profils ProRes vont de 422 Proxy à 4444 XQ. Les modifications limitées à une plage de la chronologie renvoient un MP4, et le format de sortie se choisit au lancement de la génération au lieu d’être changé après l’achèvement du résultat. Sélectionnez la forme d’export du producteur adaptée au travail de montage suivant, en la distinguant de la capacité fondamentale du modèle à modifier les images.

Pour une modification finale utile, comparez le remplacement, l’éclairage ou le style souhaités avec l’image clé et examinez les détails environnants qui ne devaient pas changer. Conservez la version réussie et révisez l’instruction ou l’image de guidage précise à l’origine d’un écart. Le rôle d’Aleph 2.0 consiste à transformer des séquences sources à l’aide d’un objectif visuel clair ; produire une nouvelle bande-son, modifier le comportement d’une application ou finaliser une chaîne distincte de livraison pour la diffusion sont des tâches supplémentaires autour de la vidéo modifiée.