Авторы Honkai Star Rail научили ИИ проходить игры за человека
Есть нюанс: нейросети нужно очень мощное железо.
Студия miHoYo создала нейросеть Gamer, способную самостоятельно проходить сложные игры. Нейросети не требуется доступ к внутренним данным игрового движка — достаточно того, что происходит на экране.
Gamer создан совместно со специалистами Национального университета Сингапура и Университета Цинхуа. Исследователи поставили перед собой задачу разработать универсального ИИ-агента, способного взаимодействовать с играми почти так же, как обычный человек, и преуспели.
Нейросеть анализирует скриншоты с частотой 5 кадров в секунду и на их основе определяет дальнейшие действия. Модель самостоятельно решает, куда переместить персонажа, когда нажать определенную клавишу и так далее.
Тестирование Gamer велось на Honkai: Star Rail, одном из проектов miHoYo. Нейросеть смогла передвигаться по игровому миру, следовать за NPC, побеждать противников и проходить сюжетные задания. С мини-играми, включая головоломки, модель тоже справилась.
Модель планируется выложить в открытый доступ, но для запуска Gamer потребуется мощное железо. Разработчики запускали модель на ускорителе Nvidia H200, обычный игровой ПК модель не потянет.
Среди возможных применений Gamer разработчики называют автоматизированное тестирование видеоигр, помощь людям с ограниченными возможностями и изучение взаимодействия человека с компьютером. Осталось выяснить, откуда у людей с ограничениями возьмется ускоритель H200.

