Any INúmero 4 Cerca

Diari d'IA Educativa

La intel·ligència artificial, explicada des de tres comunitats docents

Multimèdia 5 de novembre

Cinema amb IA

Una eina converteix el mòbil i les ulleres de realitat virtual en una càmera virtual per a Blender

Raül Torres descriu com ha fet, amb l'ajuda de Claude, un sistema que grava moviments de càmera reals a Blender per guiar després un generador de vídeo amb IA.

Raül Torres explica que ha creat amb Claude una eina per controlar la càmera en escenes 3D sense dependre només del text d'un prompt. La versió per a mòbil consisteix en una pàgina web amb WebXR que llegeix la posició i la rotació del telèfon, i un complement de Python per a Blender que mou la càmera de l'escena en temps real. En prémer REC i caminar per l'habitació, Blender grava els fotogrames clau; a la pantalla del mòbil es veu el que veu la càmera.

Després, segons el seu relat, s'atura la gravació, s'exporta un MP4 i aquest vídeo serveix de referència de càmera per al generador de vídeo Seedance 2.5. La pàgina oficial de Seedance 2.5 confirma que el model pot prendre un vídeo de referència com a guia del moviment de càmera.

Una segona versió porta el mateix mètode a unes ulleres Meta Quest 3: mitjançant Quest Link i el complement VR Scene Inspection (OpenXR) que inclou Blender, qui grava sosté una càmera virtual al comandament, el gallet inicia i atura la gravació i els joysticks permeten travellings i panoràmiques. L'autor assenyala que encara ha d'ajustar detalls, com la velocitat del comandament esquerre.

Per a l'aula d'audiovisuals o de plàstica, la idea importa perquè retorna el control de l'enquadrament i del moviment a l'alumnat: es construeix l'escenari, es decideix on va la càmera i la IA s'usa després per transformar aquest material. L'autor posa com a exemple del seu mètode de treball la seva pròpia sèrie, «Never Sleep Again», que el diari va explicar l'1 de novembre. Les eines descrites són un desenvolupament personal i, de moment, el grup només compta amb les seves captures, els seus vídeos de prova i la seva explicació.

Llegeix la conversa original a EduMedia-IAG

Comprovat a

La vinyeta de Guix i Algorisme 5 de novembre

Avui el travelling nol'escric en un prompt: elgravo caminant.
Premo REC, caminoi Blender copia lacàmera.Moviment real, resd'endevinar!
Preciós. Per què les trespreses acaben a lacafetera?

Comentaris

Per comentar cal un compte gratuït de GitHub. Els comentaris són públics i es desen a GitHub.

Torna a la portada