La intel·ligència artificial ja no només genera imatges o vídeos des de zero. Ara també pot modificar els que ja existeixen, amb un grau de precisió que reconfigura el concepte d’edició. Luma AI acaba de llançar Ray3 Modify, una funcionalitat integrada en la seva eina Dream Machine que permet transformar vídeos reals sense alterar la integritat de les actuacions ni la lògica de les escenes.
La càmera grava, la IA reinterpreta
Ray3 Modify es basa en el model Ray3 de Luma, un sistema entrenat per comprendre l’estructura espacial i temporal de vídeos gravats amb càmeres reals. A diferència de models generatius que creen vídeo a partir de text, aquest mòdul treballa sobre material existent, captat per càmeres físiques i protagonitzat per actors reals. La IA interpreta el contingut del vídeo —moviments, gestos, il·luminació, espai— i permet aplicar transformacions visuals sense trencar la seva coherència interna.
Tres eines per modificar sense perdre l’escena
La funció principal, Modify Video, permet alterar elements del pla com l’entorn, el vestuari o l’estil visual, conservant el moviment de càmera, l’expressió facial i la interacció física original. És una edició «scene-aware»: conscient de l’espai i del temps de l’escena.
Per a un control més detallat, Ray3 Modify incorpora Keyframes. Aquesta eina permet a l’usuari marcar fotogrames d’inici i final, sobre els quals es defineix la transició desitjada. El sistema assegura que la transformació respecti la continuïtat espacial fins i tot en preses amb desplaçaments complexos.
Finalment, Character Reference permet aplicar una referència visual a un personatge específic dins de l’escena. Aquesta guia pot incloure vestuari, estil o identitat facial. La IA aplica aquest model a l’actor corresponent en tot el clip, assegurant una coherència visual en cada pla.
Què es pot transformar i com
Ray3 Modify permet modificar objectes, personatges, fons o l’estil complet d’una escena, fins i tot amb canvis importants. La interfície permet seleccionar entre dos nivells d’intervenció: «Adhere» per a transformacions subtils que respecten més l’original, o «Reimagine» per a modificacions profundes.
El sistema necessita que els elements a modificar estiguin visibles en els keyframes. Si el personatge o l’objecte no apareix clarament a l’inici o final, la modificació pot resultar inconsistent. També pot haver-hi pèrdues de qualitat si el vídeo original té un format d’aspecte no estàndard, ja que el sistema adapta el contingut al marc més habitual de Dream Machine.
Dades que es transformen, gestos que es mantenen
L’entrenament de Ray3 es basa en una comprensió profunda de com es comporten els cossos, la llum i la càmera en una escena real. No treballa només amb píxels, sinó amb patrons de moviment, ritme gestual i lògica narrativa. Per això, la modificació no esborra l’actuació, sinó que l’adapta. La IA manté el gest, la intenció i l’expressió mentre reinterpreta la imatge.
Edició, direcció o reescriptura?
El que proposa Luma AI amb Ray3 Modify va més enllà del muntatge o els efectes. És una forma de direcció posterior, on el creador pot redefinir el que s’ha gravat sense repetir la presa. Ja no es parteix d’un prompt textual, sinó d’una actuació física real sobre la qual es construeixen noves versions visuals.
En lloc de substituir la producció audiovisual tradicional, l’amplia. Ray3 Modify converteix una escena ja rodada en un llenç editable, on el guió pot reescriure’s des de dins de la imatge.
