Multimedia 5 de novembro
Cinema con IA
Unha ferramenta converte o móbil e as lentes de realidade virtual nunha cámara virtual para Blender
Raül Torres describe como fixo, coa axuda de Claude, un sistema que grava movementos de cámara reais en Blender para guiar despois un xerador de vídeo con IA.
Raül Torres conta que creou con Claude unha ferramenta para controlar a cámara en escenas 3D sen depender só do texto dun prompt. A versión para móbil consiste nunha páxina web con WebXR que le a posición e a rotación do teléfono, e un complemento de Python para Blender que move a cámara da escena en tempo real. Ao premer REC e camiñar pola habitación, Blender grava os fotogramas clave; na pantalla do móbil vese o que ve a cámara.
Despois, segundo o seu relato, detense a gravación, expórtase un MP4 e ese vídeo serve de referencia de cámara para o xerador de vídeo Seedance 2.5. A páxina oficial de Seedance 2.5 confirma que o modelo pode tomar un vídeo de referencia como guía do movemento de cámara.
Unha segunda versión leva o mesmo método a unhas lentes Meta Quest 3: mediante Quest Link e o complemento VR Scene Inspection (OpenXR) que inclúe Blender, quen grava sostén unha cámara virtual no mando, o gatillo inicia e detén a gravación e os joysticks permiten travellings e panorámicas. O autor sinala que aínda debe axustar detalles, como a velocidade do mando esquerdo.
Para a aula de audiovisuais ou de plástica, a idea importa porque devolve o control do encadre e do movemento ao alumnado: constrúese o escenario, decídese onde vai a cámara e a IA úsase despois para transformar ese material. O autor pon como exemplo do seu método de traballo a súa propia serie, «Never Sleep Again», que o diario contou o 1 de novembro. As ferramentas descritas son un desenvolvemento persoal e, polo momento, o grupo só conta coas súas capturas, os seus vídeos de proba e a súa explicación.
Le a conversa orixinal en EduMedia-IAG