OpenJutsu sustituye localmente hasta cuatro personajes en un mismo video

OpenJutsu reproduce de forma local un flujo de trabajo clave de Higgsfield Genjutsu: toma un video terminado y sustituye personas, ropa u objetos concretos, conservando los movimientos, el montaje y el sonido. Puede procesar hasta cuatro personajes, pero la privacidad se paga con menor velocidad y mayores requisitos de memoria. Para los desarrolladores, el proyecto tambien resulta interesante como esquema listo para construir un editor de video a partir de modelos abiertos.

Procesado por IA desde TG: @cgevent (Метаверсище и ИИще); editado por Hamidun News
OpenJutsu sustituye localmente hasta cuatro personajes en un mismo video
Fuente: TG: @cgevent (Метаверсище и ИИще). Collage: Hamidun News.
Escuchar artículo
Ficha técnica y cifras clave
ParámetroDatos
Fuente originalTG: @cgevent (Метаверсище и ИИще) ↗
Editor jefe
Dato clave #1Funciona con una RTX 4060 Ti con 16 GB de VRAM y 64 GB de RAM.
Dato clave #2MiniMax H3 genera los fotogramas, SAM 3.1 sigue los objetos y ComfyUI conecta las etapas.
Dato clave #3El codigo es abierto, pero la velocidad y la calidad todavia no igualan las del producto en la nube.

Un editor de video en la nube resulta comodo justo hasta el momento en que hay que subir el material original de un cliente, un clip aun no publicado o una grabacion con personas reales. OpenJutsu propone otro camino: sustituir personajes, ropa y objetos directamente en el propio equipo. El proyecto reproduce uno de los principales flujos de trabajo de Higgsfield Genjutsu, pero lo ensambla con componentes abiertos y lo ejecuta mediante ComfyUI.

Su utilidad practica no se limita a ser una alternativa gratuita a un servicio comercial. OpenJutsu muestra a los desarrolladores una arquitectura ya preparada para un editor de video moderno con IA: un modelo analiza la escena, otro sigue el objeto seleccionado entre fotogramas, un tercero vuelve a dibujar la imagen y un grafo de procesamiento gestiona toda la secuencia. Un ejemplo asi resulta mas util que otra demostracion con un video vistoso: se puede descomponer, modificar e integrar en un producto propio.

Como funciona en un ejemplo habitual

Imaginemos un videoclip con cuatro participantes. El usuario sube el video, asigna una fotografia diferente a cada persona e inicia el procesamiento. OpenJutsu debe conservar los movimientos, los gestos, el trabajo de camara, el montaje y la pista de audio originales, al tiempo que redibuja el aspecto de las personas seleccionadas. No se trata solo de sustituir rostros: el sistema puede cambiar el peinado, la constitucion fisica y toda la ropa.

El mismo flujo tambien sirve para modificaciones mas concretas. Permite cambiar la ropa de un personaje, sustituir un elemento de utileria, retirar un objeto del encuadre o modificar el fondo. Despues de la pasada principal, varias herramientas independientes corrigen los rostros mal renderizados y suavizan una gradacion de color demasiado agresiva. Es un detalle importante: la generacion de video rara vez termina al pulsar un solo boton, y OpenJutsu incorpora desde el principio una fase para pulir el resultado.

Internamente, las tareas se reparten entre varios componentes. Segun la descripcion del proyecto, MiniMax H3 se encarga de redibujar el video, SAM 3.1 sigue a las personas y los objetos, Qwen3-VL interpreta el contenido de la escena y ComfyUI enlaza las operaciones en un unico grafo. Para un desarrollador, es un punto de entrada conveniente: cada bloque puede estudiarse y sustituirse por separado, sin reescribir toda la interfaz ni el flujo de procesamiento.

Local no significa ligero

La principal ventaja de OpenJutsu es la posibilidad de no enviar los videos originales al servidor de un servicio comercial. Esto reduce el riesgo de filtracion de materiales confidenciales y ofrece mas control sobre los modelos, los parametros y los resultados. Segun sus autores, el proyecto funciona con una RTX 4060 Ti con 16 GB de VRAM y un ordenador con 64 GB de RAM. Es una configuracion alcanzable para un pequeno estudio o un desarrollador, pero todavia resulta dificil calificarla como una opcion para el gran publico.

Tambien existe una limitacion mas evidente: el procesamiento es lento. El proyecto abierto debe entenderse como un prototipo funcional y una base para experimentar, no como un sustituto garantizado del producto en la nube. La calidad dependera del video original, las oclusiones, el movimiento de la camara, la iluminacion y la memoria disponible. Las funciones anunciadas tambien conviene probarlas con material propio: la publicacion del proyecto y sus videos de demostracion aun no prueban una estabilidad constante en todas las escenas.

Que puede hacer un desarrollador con el proyecto

OpenJutsu merece la atencion de los equipos que desarrollan editores de video, herramientas para localizar publicidad, sistemas de prueba virtual de ropa o software de produccion de contenido. El repositorio no proporciona un negocio terminado, sino un mapa claro: segmentacion y seguimiento, analisis de escenas, redibujado generativo, correccion de defectos y orquestacion. Se puede adoptar todo el flujo para un prototipo o probar un solo componente con datos propios.

Para los fundadores, el proyecto recuerda una realidad menos agradable: una interfaz construida sobre modelos ajenos protege peor un producto que los datos propios, la velocidad, la calidad de los resultados y un flujo de trabajo bien afinado. La comunidad puede reproducir con relativa rapidez una funcion destacada si esta se basa en modelos accesibles. Por eso, la conclusion practica es sencilla: los desarrolladores deberian probar OpenJutsu como laboratorio local, mientras que los equipos de producto deben evaluar que parte de su ventaja permanecera cuando el flujo basico este al alcance de todos.

Historia

Preguntas frecuentes sobre la noticia

Como funciona en un ejemplo habitual?

Imaginemos un videoclip con cuatro participantes. El usuario sube el video, asigna una fotografia diferente a cada persona e inicia el procesamiento. OpenJutsu debe conservar los movimientos, los gestos, el trabajo de camara, el montaje y la pista de audio originales, al tiempo que redibuja el aspecto de las personas seleccionadas. No se trata solo de sustituir rostros: el sistema puede cambiar el peinado, la constitucion fisica y toda la ropa. El mismo flujo tambien sirve para modificaciones mas concretas.

¿Qué se sabe sobre Local no significa ligero?

La principal ventaja de OpenJutsu es la posibilidad de no enviar los videos originales al servidor de un servicio comercial. Esto reduce el riesgo de filtracion de materiales confidenciales y ofrece mas control sobre los modelos, los parametros y los resultados. Segun sus autores, el proyecto funciona con una RTX 4060 Ti con 16 GB de VRAM y un ordenador con 64 GB de RAM.

¿Qué se sabe sobre Que puede hacer un desarrollador con el proyecto?

OpenJutsu merece la atencion de los equipos que desarrollan editores de video, herramientas para localizar publicidad, sistemas de prueba virtual de ropa o software de produccion de contenido. El repositorio no proporciona un negocio terminado, sino un mapa claro: segmentacion y seguimiento, analisis de escenas, redibujado generativo, correccion de defectos y orquestacion. Se puede adoptar todo el flujo para un prototipo o probar un solo componente con datos propios.

ZK
Zhemal Khamidun — CPO de Alpina Digital, product manager de AlpinaGPT. Crea productos de IA desde 2019. Hamidun News es un proyecto personal que creció hasta ser un agregador en producción con más de 6.000 lectores.
✦ Unified AI Workspace · Nomad

Test Frontier LLMs & Autonomous Agents in One Workspace

Run Claude Opus 5.5, GPT-6, Gemini 3.1, and DeepSeek side-by-side in Nomad AI (nomadnet.ai) — unified model routing, deep research, and multimodal workflows under one subscription.

Try Nomad AI →Launch Nomad Agent
¿Qué te parece?
Cargando comentarios…