No se sap quan estarà disponible comercialment, però Sora, el nou model de generació de vídeo d’OpenAI, ha desfermat l’interès i el temor, tot a la vegada, de la indústria audiovisual.

Sora pot crear vídeos de fins a un minut de durada i una qualitat no vista fins ara a partir d’indicacions de text.

OpenAI ja s’ha reunit amb executius, productors i directors de Hollywood. Alguns artistes l’han provat i han difós curts generats amb l’eina. Aquí en teniu una mostra.

Es poden distingir dels creats per humans? La revista Variety els ha ensenyat a 1000 persones i ha preguntat si eren fets per persones o per una IA. Gairebé la meitat dels enquestats creien que els havien fet equips humans.

De fet, tenen raó. En totes les produccions l’ús de Sora ha estat parcial. Ha calgut molta participació humana. L’equip de Shy Kids, creador de Air Head, un dels vídeos que ha tingut més ressò, explica com l’han fet i quines són les seves impressions.

Els que han provat Sora diuen que:

Pot substituir el rodatge en tot o en part però no l’edició ni la postproducció. De moment.

La BBC ha dissenyat un pla estratègic per treure profit de la IA generativa. A l’octubre va publicar uns principis generals que ara ha concretat en 12 accions per: maximitzar el valor del contingut, proporcionar noves experiències a l'audiència i optimitzar processos interns. També ha publicat una guia ètica d’ús.

En paral·lel, s'està plantejant treure més profit dels seus arxius gràcies a la intel·ligència artificial. Una opció seria explotar-los directament i construir un model propi. L’altra, arribar a acords amb tercers, com estan fent El País, Le Monde i altres…

Mentrestant van fent proves (i errors).

Més de 60.00 guionistes de tot el món s’han unit en una coalició per defensar els seus drets davant dels avenços de la intel·ligència artificial. The Hollywood Reporter.

Create don't scrape és un altre moviment que proposa unir esforços de tots els creadors per evitar l’abús de les plataformes d’IA.

També els músics. Més de 200 de cantants i compositors internacionals han firmat el manifest Stop Devaluing Music contra "l'ús depredador de les seves obres per entrenar la IA, robar les seves veus i composicions i destruir l’ecosistema musical”.

La gota que ha fet vessar el vas de la paciència dels músics ha estat Suno v3, una eina de IA que permet generar música a partir de text amb una qualitat superior a la resta d’opcions. El nombre d’usuaris que la utilitzen ha crescut exponencialment des que Microsoft l’ha integrat al Copilot. L’última novetat es Udio, desenvolupat per exinvestigadors de Deepmind.

Per què no protesten els artistes europeus?

“Resulta sorprenent que, a diferència del que ha passat als Estats Units, a Europa el sector cultural amb prou feines hagi mostrat inquietud o preocupació sobre això. Probablement perquè sempre costa a la gent de la cultura, especialment a Espanya, imaginar el seu futur més enllà de la defensa precaritzada del que és immediat”. José María Lassalle a La Vanguardia.

Sincronització labial. Us presentem un vídeo de 8 minuts sobre com sincronitzar una veu amb els moviments labials d’un personatge utilitzant Pika Labs. Ho explica Caleb Ward, de Curious Refuge.

Construir una periodista virtual. Tots els passos. Aquí trobareu una explicació sintètica de totes les eines usades per construir una reportera que informa d’un suposat crim des del lloc dels fets.

Així s’ha fet Alba Renai, la presentadora virtual de Mediaset. L'agència Be a Lion, filial de Mediaset España, explica el procés de creació a El País.

Voice Engine d’Open AI. Clonació de veu amb només 15 segons d’àudio original.
Modelatge 3D. Molta activitat al voltant de la conversió d’imatges 2D a 3D. Per citar-ne dues: SV3D, de Stability AI, i LATTE3D, de Nvidia.
EMO, generador de video a partir de imatges, generador de veu i sincronització labial tot en un. Dels laboratoris d’Alibaba (Xina).
V-Jepa, de Meta és un model de IA no generativa que aprèn a efectuar tasques a partir de la interpretació de les imatges d’un vídeo.
Vids, assistent de Google per a la generació de vídeo, escriptura, producció i edició, tot en un. Disponible el mes de juny.

Avís Legal

Si heu rebut aquest e-mail és que la vostra direcció de correu electrònic està inclosa a la base de dades del Clúster Audiovisual de Catalunya, on serà tractada confidencialment, d’acord amb la política de privacitat i seguretat del Clúster Audiovisual de Catalunya i la Llei Orgànica de protecció de dades de caràcter personal. Per a exercir els drets d’accés, rectificació, cancel·lació i oposició, poseu-vos en contacte amb nosaltres per e-mail a l’adreça info@clusteraudiovisual.cat o per telèfon al número 93 250 43 56.

Si voleu deixar de rebre les nostres newsletter, convocatòries, etc., responeu a aquest e-mail amb l’assumpte "baixa".

Tot esperant Sora

www.clusteraudiovisual.cat