Tesseract даёт ИИ-агентам редактировать 3D-сцены, сохраняя объекты и слои

Ролик почти согласован, но заказчик просит замедлить камеру и сделать корпус устройства матовым. В этот момент важна возможность поправить два параметра и сохранить остальную сцену. Mirage предлагает для таких задач Tesseract — движок, которым управляет ИИ-агент. Практическая идея понятна: поручить агенту сборку и правки, а результат хранить как редактируемый проект.

Это заслуживает внимания разработчиков и продуктовых команд, которым нужны демонстрации устройств, анимированные объяснения и короткие презентационные видео. Однако вывод из исходного поста о том, что инструмент «хоронит» диффузионное видео, слишком смелый. Доступные материалы показывают возможности другого производственного процесса, но не доказывают превосходство по стоимости, скорости или качеству.

Что именно получает агент

По документации репозитория, Tesseract состоит из CLI-инструмента tsrct и навыков, объясняющих агенту работу с видео, анимацией и 3D. Пользователь описывает задачу, при необходимости прикладывает исходники, а агент создаёт проект .tsrct, проверяет результат и вносит изменения в тот же проект.

Представим демонстрацию настольного устройства. В брифе заданы форма корпуса, материал, освещение и движение камеры. После первого просмотра выясняется, что камера слишком быстро проходит мимо разъёма. Следующая просьба относится к конкретному движению, а не ко всей картинке: задержаться у разъёма, сохранив остальные решения. Это пример задачи для проверки инструмента, а не результат нашего тестирования.

Для команды здесь интересна сама организация работы. У проекта появляется состояние, к которому можно возвращаться после очередного комментария. Утверждённые элементы становятся опорой для следующей правки. При этом человеку всё равно предстоит проверять, правильно ли агент понял запрос и действительно ли сохранил нужные детали.

Откуда берётся изображение

В описании 3D-возможностей Mirage заявляет работу с геометрией, материалами, светом и камерами. Предусмотрены быстрый растровый предпросмотр и рендер с трассировкой путей света. Последний рассчитывает отражения и непрямое освещение внутри сцены. Это объясняет интерес к подходу для предметных кадров, где важны форма и поведение поверхностей.

Но наличие такого рендера само по себе не гарантирует хороший результат. Неудачная модель останется неудачной моделью, даже если свет рассчитан убедительно. Ошибки пропорций, пересечения объектов и неудобный ракурс придётся находить при просмотре. Красивый отдельный кадр также ничего не говорит о плавности движения камеры на протяжении всего ролика.

Есть и существенные ограничения. Tesseract не содержит встроенную модель генерации произвольного меша по тексту: сложному объекту может понадобиться готовая 3D-модель. Импорт Blender частичный. Скорость рендера зависит от среды исполнения; без подходящего GPU она может заметно снизиться. Поэтому обещать мгновенный фотореалистичный результат по одному запросу было бы неправильно.

Отдельно стоит проверить передачу работы дизайнеру. На странице продукта указаны импорт и экспорт проектов Adobe, но поддержка частичная, а экспорт в After Effects экспериментальный. Бесплатный движок также не отменяет расходов на самого агента.

Как проверить пользу для своей команды

Я бы начал с короткого предметного ролика и трёх заранее заданных правок: заменить материал, изменить движение камеры и поправить титр. Это небольшой эксперимент, в котором легко увидеть, какие элементы сохранились, где потребовалось вмешательство человека и сколько времени заняло согласование.

Считать стоит весь цикл: подготовку исходников, первый приемлемый вариант, исправления, рендер и передачу проекта. Если агент быстро делает черновик, но затем команда долго восстанавливает материалы после экспорта, первоначальная экономия может исчезнуть. Полезно заранее определить, что именно будет считаться успешной передачей.

Tesseract даёт повод проверить управление визуальным проектом через агента на реальной задаче. Для продуктовой команды решающим результатом станет предсказуемая следующая правка: сколько она занимает, что сохраняет и можно ли после неё продолжить работу привычным способом.