Интенсив 21–22.11 · БесплатноБесплатный 2-дневный интенсив по вайбкодингу 21–22 ноября в 16:00 МСК (Сб–Вс) · Живой Поток 3 стартует 23.11Записаться бесплатно →Поток 3 (23.11)
ИнфраструктураРазбор · На радарHabr AI→ оригинал

Amazon превратит повторы НБА в 3D-сцены: ИИ достраивает ракурсы на чипах Trainium

Amazon добавит в трансляции НБА на Prime Video технологию Prime 360: розыгрыш можно пересмотреть как 3D-сцену и «пролететь» камерой сквозь игру. Кольцо камер вокруг площадки снимает эпизод со всех сторон, а диффузионная модель (ИИ вроде тех, что рисуют картинки) в облаке AWS собирает его покадрово. Разрабатывали всё с использованием чипов Amazon Trainium. Для медиа это генеративный ИИ не в демо, а в прямом эфире.

AI-обработка оригинала Habr AI; редакция Hamidun News
Amazon превратит повторы НБА в 3D-сцены: ИИ достраивает ракурсы на чипах Trainium
Источник: Habr AI. Коллаж: Hamidun News.
Слушать статью
Паспорт материала и цифры
ПараметрДанные
ПервоисточникHabr AI ↗
Главный редактор
Ключевой факт #1Камеры откалиброваны и синхронизированы, снимают один момент одновременно
Ключевой факт #2Работает в прямом эфире и в студийных разборах до и после игр
Ключевой факт #3В сезоне Amazon покажет более 100 матчей, включая финал Востока

Обычный повтор в спортивной трансляции ограничен тем, где стояла камера. Если ключевой эпизод случился за спинами игроков, зритель видит его с неудобного угла, и режиссёр ничего не может изменить. Amazon решает эту проблему в баскетболе: перед вторым сезоном трансляций НБА (главной баскетбольной лиги США) на платформе Prime Video компания запускает технологию Prime 360. Её идея проста: вокруг площадки стоит кольцо камер, их снимки отправляются в облако AWS, а там диффузионная модель — тот же класс ИИ, что рисует картинки по текстовому описанию, — достраивает из них трёхмерную сцену. В такой сцене можно развернуть виртуальную камеру в любую точку, даже туда, где настоящей камеры не было. Систему разрабатывали с использованием собственных ИИ-чипов Amazon, которые называются AWS Trainium.

Как это устроено

По периметру арены расположено кольцо камер высокого разрешения. Они откалиброваны и синхронизированы, то есть снимают один и тот же момент одновременно с разных точек. Материал уходит в облако AWS, где генераторы изображений на основе диффузионных моделей воссоздают розыгрыш покадрово и собирают из него 3D-сцену.

Проще всего представить это как виртуальную камеру, которой не нужен оператор. Реальных камер конечное число, а ракурс между ними можно достроить программно. Уэйд Вакасигэ, директор по продукту, объясняет это так: если хочется ещё раз взглянуть на момент, камеру можно буквально «провести» сквозь саму игру. По его словам, такой ракурс показывает зрителям у экранов то, чего не видят даже болельщики на трибунах.

Функция будет доступна не только в записи. Её собираются использовать и в прямых трансляциях, и как аналитический инструмент в предматчевых, перерывных и послематчевых студийных программах. Эксперт в студии сможет остановить эпизод и показать, как выстроилась защита, с любой точки.

Железо и команда

Amazon отмечает, что систему создала смешанная команда продюсеров, инженеров и специалистов по ИИ. Разработку вели с использованием собственных чипов компании — AWS Trainium. Это важный сигнал для рынка: Amazon показывает на заметном публичном продукте, что её ускорители подходят для генеративных задач с видео, а не только для языковых моделей. Для AWS это ещё и живая витрина: если трансляция работает в реальных условиях, облако справляется с нагрузкой, которую обычно демонстрируют только в презентациях.

Подробностей компания не раскрыла. В материале не названы задержка между событием на площадке и готовой 3D-сценой, количество камер, точность реконструкции и стоимость вычислений. Поэтому пока неизвестно, насколько быстро такие повторы будут появляться в прямом эфире и как часто их станут использовать.

Что ещё меняется в Prime Video

Prime 360 идёт в паре с другими нововведениями сезона. Prime Video интегрирует фэнтези-баскетбол от Yahoo Sports: зрители со связанными аккаунтами увидят составы своих команд и актуальную статистику игроков прямо на экране. Система также будет рекомендовать текущие и будущие матчи, где играют их фэнтези-игроки. Ставки через Prime Video делать нельзя, но следить за активными ставками на FanDuel во время трансляций по-прежнему можно. Возвращается и альтернативная трансляция Prime Vision, которую Amazon использует как полигон для статистики и графики на основе ИИ.

Масштаб у проекта серьёзный. «NBA on Prime» стартовал в октябре прошлого года матчем «Селтикс» и «Никс» в рамках 11-летнего соглашения с эксклюзивными правами на часть игр регулярного чемпионата и плей-офф. В этом сезоне компания планирует показать более 100 матчей: турнир плей-ин, отдельные игры первого и второго раундов и впервые эксклюзивные трансляции финальной серии Восточной конференции.

Что это значит для индустрии

Для разработчиков и продактов в медиа здесь три вывода. Во-первых, диффузионные модели используют не только для генерации картинок по запросу: они могут достраивать реальную сцену по данным с физических камер. Во-вторых, фирменные чипы облачных провайдеров становятся частью продуктового рассказа, а не скрытой инфраструктурой. В-третьих, стриминговые сервисы конкурируют уже не только правами на матчи, но и тем, что зритель видит на экране и как с этим взаимодействует.

Главный вопрос в том, насколько убедительно будет выглядеть результат. Достроенные кадры могут содержать артефакты, особенно при быстрых движениях и когда игроки закрывают друг друга. Станет ли Prime 360 привычной частью просмотра или останется эффектной опцией для избранных моментов, покажут первые игры сезона.

Сюжет

Вопросы и ответы по материалу

Что известно по теме: как это устроено?

По периметру арены расположено кольцо камер высокого разрешения. Они откалиброваны и синхронизированы, то есть снимают один и тот же момент одновременно с разных точек. Материал уходит в облако AWS, где генераторы изображений на основе диффузионных моделей воссоздают розыгрыш покадрово и собирают из него 3D-сцену. Проще всего представить это как виртуальную камеру, которой не нужен оператор. Реальных камер конечное число, а ракурс между ними можно достроить программно.

Что известно по теме: железо и команда?

Amazon отмечает, что систему создала смешанная команда продюсеров, инженеров и специалистов по ИИ. Разработку вели с использованием собственных чипов компании — AWS Trainium. Это важный сигнал для рынка: Amazon показывает на заметном публичном продукте, что её ускорители подходят для генеративных задач с видео, а не только для языковых моделей. Для AWS это ещё и живая витрина: если трансляция работает в реальных условиях, облако справляется с нагрузкой, которую обычно демонстрируют только в презентациях.

Что известно по теме: что ещё меняется в Prime Video?

Prime 360 идёт в паре с другими нововведениями сезона. Prime Video интегрирует фэнтези-баскетбол от Yahoo Sports: зрители со связанными аккаунтами увидят составы своих команд и актуальную статистику игроков прямо на экране. Система также будет рекомендовать текущие и будущие матчи, где играют их фэнтези-игроки. Ставки через Prime Video делать нельзя, но следить за активными ставками на FanDuel во время трансляций по-прежнему можно.

ЖХ
Жемал Хамидун — CPO Alpina Digital, продакт-менеджер AlpinaGPT. Делает AI-продукты с 2019 года. Hamidun News — pet project, который вырос в production-агрегатор с 6000+ читателей.
✦ Закрытый клуб практиков · Vibe Club

Внедряйте ИИ быстрее рынка вместе с инженерами и фаундерами

Внутри Vibe Club (hamidun.com/club): еженедельные живые мастермайнды и разборы архитектуры с Жемалом Хамидуном, закрытый Tech Radar, LMS и обновляемая база из 370+ боевых скиллов.

Вступить в Vibe Club →Тест-драйв Академии (72ч)
Что вы думаете?
Загружаем комментарии…