G-Assist стал реальностью: NVIDIA представляет NitroGen, открытую AI-модель, которая может играть за вас в 1000+ игр.

NitroGen может играть в Witcher 3, Cyberpunk или даже Rocket League

Исследователи из NVIDIA, работающие с MineDojo, представили NitroGen, новую AI-модель, которая учится, наблюдая за игровым процессом. Она была обучена с использованием более 40 000 часов видео из более чем 1 000 различных игр. Команда делает все ресурсы этого проекта общедоступными, включая набор данных, инструменты для измерения производительности, саму модель и код, использованный для ее создания.

Пока крипто-инвесторы ловят иксы и ликвидации, мы тут скучно изучаем отчетность и ждем дивиденды. Если тебе близка эта скука, добро пожаловать.

Купить акции "голубых фишек"

Основная концепция заключается в автоматическом обучении на игровых видеороликах путем идентификации и отслеживания используемого контроллера. Команда собрала видеоролики игроков, демонстрирующих свой контроллер на экране. Затем они использовали методы распознавания изображений, чтобы точно определить контроллер в видео и обрезать этот фрагмент для анализа нажатий кнопок и движений.

Система использует модель для определения положения джойстика и нажатых кнопок на основе меньшей, обрезанной части экрана. Чтобы предотвратить прямое считывание этой обрезанной области ИИ, она скрыта от основной части экрана. Результаты показывают, что система точно предсказывает движения джойстика (со средним значением R² = 0.84) и правильно определяет нажатия кнопок в 96% случаев.

Как только мы разобрались с управлением в игре, мы обучили NitroGen с помощью техники, называемой клонированием поведения. По сути, она научилась переводить то, что видит на экране, в правильные нажатия кнопок на геймпаде.

Система команды использует метод управления, вдохновлённый исследованиями NVIDIA в области робототехники, под названием GR00T. По сути, GR00T — это модель, которая говорит чему-то, как двигаться. В данном случае, вместо управления моторами робота, модель управляет внутриигровыми действиями, такими как движения джойстика и нажатия кнопок. Они поделились результатами для модели с 500 миллионами параметров, обученной на полном наборе данных. Для тестирования они создали систему, которая запускает игры и записывает игровой процесс. При тестировании на играх, на которых она не была обучена, дообучение системы их методом привело к заявленному улучшению до 52% в выполнении задач, по сравнению с началом процесса обучения с нуля.

Окей, так что я изучал NitroGen, и сейчас он действительно сосредоточен на играх с контроллером. По сути, он разработан для предсказания того, что вы собираетесь делать с геймпадом – весь набор обучающих данных построен на основе этих вводов с контроллера. Код настроен для работы с играми, запущенными на Windows, но он не включает сами игровые файлы, поэтому вам нужно будет предоставить их. Это означает, что если вы игрок, использующий клавиатуру и мышь, то, вероятно, вам пока нечего опасаться! Единственный способ, которым это могло бы на вас повлиять, — это если кто-то создаст способ перевода вводов с геймпада в нажатия клавиш на клавиатуре, а затем обучит NitroGen на *этих* данных.

Определенно кажется, что сейчас я провожу исследовательский эксперимент с GeForce GTX G-Assist. Я использовал общедоступные видео для обучения бота, а не данные с моего собственного компьютера, что означает, что у него все еще есть хороший шанс выиграть в игру.

Смотрите также

2025-12-20 17:05