Google DeepMind научила своих ботов играть в Quake 3 Arena лучше человека

Google DeepMind научила своих ботов играть в Quake 3 Arena лучше человека


Судя по всему, в список игр, первенство в которых за последнее время машины отобрали у людей, уже можно занести еще одну. Речь о культовом шутере Quake 3 Arena. Компания Google DeepMind объявила о создании искусственного интеллекта, способного играть в эту игру не просто как человек, а даже лучше человека. Сразу оговорим, что речь о режиме Capture The Flag (CTF) — захват флага, в котором для победы нужно захватить вражеский флаг и принести на свою «базу».
Как и в случае с другими схожими проектами создания ИИ для той или иной 3D-игры, главная сложность здесь заключается в том, чтобы обучить бота ориентироваться в огромном трехмерном пространстве, не имея точных топографических данных. Иными словами, уметь сориентироваться на местности без карты.
Специалисты DeepMind использовали метод обучения с подкреплением (reinforcement learning), который уже стал стандартом в отрасли. Аналогичным образом обучалась система AlphaGo и прочие алгоритмы, сумевшие обыграть человека в нескольких видеоиграх Atari. Основное этого метода от классического машинного обучения заключается в том, что ИИ обучается в процессе взаимодействия с окружающей средой методом проб и ошибок, а не на исторических данных.
В самом начале обучения бот не имеет ни малейшего представления о самой игре и что в ней нужно делать. Разобраться во всем ему предстоит в одиночку. Обычно одному боту в противники ставят другого, и они начинают учиться. Но DeepMind решила пойти более сложным путем и организовать групповые занятия для 30 ботов с целью достижения более высокого разнообразия стилей игры.
Сколько потребовалось сыграть игр, чтобы выйти на приемлемый уровень? Около 0,5 млн продолжительностью по 5 минут каждая. Путем несложных подсчетов можно понять, что обучение заняло 1736 дней чистого времени.
Stfw.Ru
Читайте также


Оставить комментарий
Имя:  

Комментарий:

Примечание: При комментировании материала просим соблюдать законы Российской Федерации. Пожалуйста, воздержитесь от оскорблений и токсичного поведения.

Сводка событий

00:09 Panasonic анонсировала беззеркальные полнокадровые камеры Lumix S: двойная стабилизация, высокая скорость, запись видео 4K/60


00:09 Microsoft выпустила Office 2019 для Mac и Windows, но пока лишь для корпоративных пользователей


00:09 HyperX объявил о начале продаж новых SSD серий FURY RGB и SAVAGE EXO


00:09 Fujifilm представил новую гибридную камеру Instax Square SQ20 для мгновенной печати Instagram-фото с возможностью записывать видео


00:09 Fujifilm показала первую в мире 100-мегапиксельную среднеформатную беззеркальную камеру и объектив с диафрагмой f/1 и автофокусом (тоже первый в своем роде)


00:09 Эрдоган покинул зал заседания Генассамблеи ООН во время выступления Трампа


00:09 Правительство Израиля приказало армии действовать против Ирана в Сирии


00:09 Пентагон использует граждан Грузии как "подопытных кроликов", заявили в МИД


00:09 МИД: Россия категорически не приемлет новые санкции США против Венесуэлы


00:09 Как Яндекс применил компьютерное зрение для повышения качества видеотрансляций. Технология DeepHD


00:09 Ивритоязычные СМИ: Россия применяет к Израилю "крымскую модель"


00:09 [Чужая] Образ Салтычихи: почему Орлова проиграла выборы техническому кандидату


00:09 "Все были счастливы и грабили потребителя". Глава ФАС Игорь Артемьев о государственно-монополистическом капитализме


События из мира ИТ