Интенсив 21–22.11 · БесплатноБесплатный 2-дневный интенсив по вайбкодингу 21–22 ноября в 16:00 МСК (Сб–Вс) · Живой Поток 3 стартует 23.11Записаться бесплатно →Поток 3 (23.11)
ИнфраструктураРазбор · На радарHabr AI→ оригинал

Тест GPU-симуляторов роботов: Genesis выдал 11,1 млн кадров физики в секунду

Роботов учат в симуляторах на видеокарте, но честность их физики и повторяемость результатов почти не проверяли. AIRI, МФТИ и Shanghai AI Lab сравнили семь симуляторов на одной RTX 5070: Genesis с манипулятором Franka выдал около 11,1 млн кадров физики в секунду (FPS) на 131 072 средах. Полностью повторяемыми оказались лишь Genesis и MJX, поэтому смотрите не только на FPS.

AI-обработка оригинала Habr AI; редакция Hamidun News
Тест GPU-симуляторов роботов: Genesis выдал 11,1 млн кадров физики в секунду
Источник: Habr AI. Коллаж: Hamidun News.
Слушать статью
Паспорт материала и цифры
ПараметрДанные
ПервоисточникHabr AI ↗
Главный редактор
Madrona не воспроизвела трениекубики уехали на 2+ м, ошибка в 50 раз
Ключевой факт #2Пять из семи симуляторов отклонились от реального опыта примерно на 5 см
MuJoCo Playgroundлишь около 35 FPS на падающих кубиках при 256 средах

Чтобы робот перестал ронять чашки, ему нужны миллионы попыток. На настоящем железе это дорого и рискованно, поэтому обучение всё чаще переносят в симулятор, а сам симулятор запускают на видеокарте. Там одновременно крутятся тысячи копий одной и той же сцены с роботом: каждая такая копия называется средой.

Скорость измеряют в FPS. Рендеринг в тестах выключен, так что это не кадры на экране, а число шагов физики, которые симулятор считает за секунду суммарно по всем средам. Genesis с манипулятором Franka дал около 11,1 млн FPS на 131 072 средах.

В среднем получается примерно 85 шагов физики в секунду на каждую копию сцены. Команда Дмитрия Юдина из AIRI и МФТИ вместе с Shanghai AI Lab собрала бенчмарк GPUSimBench, чтобы проверить два вопроса. Остаётся ли физика правдоподобной, когда на одной карте работают сотни тысяч сред?

И даст ли один и тот же эксперимент один и тот же результат при повторном запуске? Работу представили на конференции IROS 2026.

Как устроен тест

В сравнение вошли семь симуляторов с GPU-ускорением: Isaac Lab, ManiSkill, Genesis, Madrona, MuJoCo Warp, MJX и MuJoCo Playground. Платформы, которые распараллеливаются только на процессоре (например, Gazebo и PyBullet), в тест не попали. Все замеры сделали на одной рабочей станции с видеокартой Nvidia RTX 5070 и 12 ГБ памяти. Рендеринг был отключён, шаг физики везде составлял 0,01 с.

Масштабируемость проверяли на двух сценах: свободно падающая стопка кубиков 3×3×3 и манипулятор Franka Panda со случайными движениями суставов. Для проверки реализма авторы построили настоящую установку. Стальной шар скатывается по деревянной плоскости под углом 20° и врезается в стенку из 27 деревянных кубиков. Через пять секунд фиксируют положение каждого кубика. Сцена хаотичная: малейшая разница в начальных условиях даёт другую раскладку. Шестнадцать реальных запусков задали эталонное распределение, шестнадцать параллельных сред в симуляторе дали его цифровой аналог. Расхождение между ними измеряли в сантиметрах.

Скорость, реализм и повторяемость

По скорости картина такая:

  • Genesis лидирует для манипуляторов: около 11,1 млн FPS на Franka при 131 072 средах.
  • MJX и MuJoCo Warp рекордсмены по числу сред: по 524 288 сред с Franka.
  • Madrona держала 262 144 среды на падающих кубиках при около 481 тыс. FPS, но в этой конфигурации не поддерживает манипуляторы.
  • Isaac Lab выдал сбалансированный результат: около 472 тыс. FPS на падающих кубиках и всего 3,3 ГБ памяти GPU.
  • MuJoCo Playground оказался самым медленным: около 35 FPS на падающих кубиках при максимальных для него 256 средах. GPU-ускорение само по себе быстроты не гарантирует.

С реализмом хорошая новость: в хаотичном опыте пять из семи симуляторов отклонились от реальности примерно на пять сантиметров. Базовая физика контактов работает неплохо. Исключение — Madrona. Её решатель XPBD в этой конфигурации не воспроизвёл трение на деревянной плоскости, поэтому кубики почти не тормозили и уезжали больше чем на два метра. Разрыв между симуляцией и реальностью вырос примерно в 50 раз. Бенчмарки по успешности задач такого не заметят: захваченная чашка в любом случае считается захваченной.

Повторяемость оказалась самым неожиданным результатом. Генераторы случайных чисел зафиксировали, рандомизацию отключили, сцены сделали идентичными. Ожидали одинаковые результаты, но получили четыре режима:

  1. Isaac Lab и ManiSkill: среды внутри одного запуска различаются на 4–5 см, но итог запуска в целом воспроизводится.
  2. Genesis и MJX: полная детерминированность в этих тестах, самый подходящий режим для честных сравнений.
  3. Madrona и MuJoCo Warp: результаты расходятся и между средами, и между запусками.
  4. MuJoCo Playground: среды внутри запуска согласованы, а независимые запуски различаются примерно на 1,4 см.

Что делать на практике и где границы

Допустим, вы сравниваете две политики управления в Isaac Lab: одну гоняете в первой половине сред, вторую во второй. Раз среды внутри запуска различаются на 4–5 см, часть разницы может дать шум симулятора, а не качество политик. Это наш вывод из таблицы авторов, а не их прямое утверждение. Если для вас важны честные A/B-сравнения и воспроизводимость, в этих тестах лучше всех выглядели Genesis и MJX. Для максимального числа параллельных сред с манипуляторами брали MJX и MuJoCo Warp. Для скорости на манипуляторе брали Genesis. Увеличивая число сред, следите не только за FPS, но и за стабильностью результатов.

Ограничения тоже важны. Все тесты прошли на одной потребительской видеокарте, а реальный эталон собран на одной сцене из 16 испытаний. Выводы о конкретных симуляторах относятся к конфигурациям, которые использовали авторы: например, Madrona с XPBD могла показать себя иначе при других настройках. Статья и код бенчмарка опубликованы, так что проверить результаты на своём железе можно.

Сюжет

Вопросы и ответы по материалу

Что известно по теме: как устроен тест?

В сравнение вошли семь симуляторов с GPU-ускорением: Isaac Lab, ManiSkill, Genesis, Madrona, MuJoCo Warp, MJX и MuJoCo Playground. Платформы, которые распараллеливаются только на процессоре (например, Gazebo и PyBullet), в тест не попали. Все замеры сделали на одной рабочей станции с видеокартой Nvidia RTX 5070 и 12 ГБ памяти. Рендеринг был отключён, шаг физики везде составлял 0,01 с.

Что известно по теме: скорость, реализм и повторяемость?

По скорости картина такая: Genesis лидирует для манипуляторов: около 11,1 млн FPS на Franka при 131 072 средах. MJX и MuJoCo Warp рекордсмены по числу сред: по 524 288 сред с Franka. Madrona держала 262 144 среды на падающих кубиках при около 481 тыс. FPS, но в этой конфигурации не поддерживает манипуляторы. Isaac Lab выдал сбалансированный результат: около 472 тыс. FPS на падающих кубиках и всего 3,3 ГБ памяти GPU.

Что известно по теме: что делать на практике и где границы?

Допустим, вы сравниваете две политики управления в Isaac Lab: одну гоняете в первой половине сред, вторую во второй. Раз среды внутри запуска различаются на 4–5 см, часть разницы может дать шум симулятора, а не качество политик. Это наш вывод из таблицы авторов, а не их прямое утверждение. Если для вас важны честные A/B-сравнения и воспроизводимость, в этих тестах лучше всех выглядели Genesis и MJX. Для максимального числа параллельных сред с манипуляторами брали MJX и MuJoCo Warp.

ЖХ
Жемал Хамидун — CPO Alpina Digital, продакт-менеджер AlpinaGPT. Делает AI-продукты с 2019 года. Hamidun News — pet project, который вырос в production-агрегатор с 6000+ читателей.
✦ Единое AI-пространство · Nomad

Протестируйте новые LLM и мультимодальные модели в одном окне

Платформа Nomad AI (nomadnet.ai) даёт прямой доступ к Claude Opus 5.5, GPT-6, Gemini 3.1, DeepSeek и автономным агентам без VPN, зарубежных карт и зоопарка подписок.

Открыть Nomad AI →Автономный Nomad Agent
Что вы думаете?
Загружаем комментарии…