ИИ DeepMind победил людей в кооперативной игре Quake III Arena

Агенты нейросети тренировались на тысячах игр одновременно, проведя около 450 тысяч матчей.

Сотрудники британской компании DeepMind, которая с 2014 года принадлежит Google, опубликовали статью в журнале Science, посвященную успехам их искусственного интеллекта.

На этот раз они смогли натренировать алгоритм на командную игру в режиме «Захват флага» мультиплеерного шутера Quake III Arena. Команда из агентов ИИ в подавляющем количестве игр победила команду людей.

Для тренировки агентов специалисты использовали обучение с подкреплением — метод машинного обучения, при котором система учится, взаимодействуя со средой. Авторы статьи пишут, что этот метод успешно зарекомендовал себя в обучении одного агента, но они хотели узнать, насколько он успешен при командной работе.

В качестве платформы они выбрали мультиплеерный шутер от первого лица Quake III Arena, но задали свои условия игры. Во-первых, карты каждый раз генерируются случайно. Во-вторых, в матче принимают участие только четыре игрока: по два с каждой стороны. Соревнование проходит только в одном режиме — «Захват флага»: каждая из команд должна одновременно защитить свой флаг, захватить флаг оппонентов и принести на свою базу. Реакцию системы снизили до средних показателей человека.

Авторы тренировали 30 агентов. Тренировка происходила благодаря многотысячным параллельным партиям, которые отыгрывали агенты. При этом каждый агент представлял собой индивидуальную единицу, которая действует самостоятельно, исходя из обучения с подкреплением. Специалисты также демонстрируют филогенетическое дерево, которое строится в ходе этого обучения.

После тренировок алгоритмы сыграли несколько партий с командой людей. Обе команды играли на неизвестных для них картах. Пара агентов за игру в среднем захватывала на 16 флагов больше, чем пара людей. Только когда человек играл в партнерстве с искусственным интеллектом, ему удавалось выиграть у объединения алгоритмов (5% вероятности победы).

Профессор Технологического колледжа Джорджии Марк Ридл (Mark Riedl) раскритиковал такой подход британской фирмы, сказав, что агенты не обмениваются сообщениями, а лишь реагируют на те события, которые происходят в игре. Однако представитель DeepMind Макс Джадерберг (Max Jaderberg) возразил:

«[В нашей симуляции] один из агентов сидит в лагере противника, ожидая, когда вновь появится флаг, это возможно только потому, что он полагается на своего партнера по команде».

Джадерберг говорит об одной из тактик искусственного интеллекта, выработанной тем в ходе обучения, которая предполагает ожидание появления нового флага в лагере оппонента. Ее часто используют и люди.

В январе DeepMind сообщила, что ее искусственный интеллект AlphaStar одолел двух профессиональных игроков в стратегию StarCraft II, проходящую в реальном времени.

Источник: naked-science.ru

Подписывайтесь на канал «Хвилі» в Telegram, на канал «Хвилі» в Youtube, страницу «Хвилі» в Facebook

Последние новости
Что будет с ценами на газ в Украине: названы два сценария

Что будет с ценами на газ в Украине: названы два…

Цена на газ для украинцев может снизиться.
Экс-депутат Госдумы Пономарев рассказал об опасениях Путина касательно Зеленского

Экс-депутат Госдумы Пономарев рассказал об опасениях Путина касательно Зеленского

По его словам, президент РФ боится таких людей, как Зеленский
Люди вышли из комы и поделились впечатлениями

Люди вышли из комы и поделились впечатлениями

Люди меняют свою жизнь после выхода из комы.
Microsoft показала Windows 11

Microsoft показала Windows 11

Microsoft представило самую современную ОС для ПК и гаджетов
Пристайко: Россия осталась «несколько разочарованной» позицией Зеленского на встрече в Париже

Пристайко: Россия осталась «несколько разочарованной» позицией Зеленского на встрече в…

Путин думал, что Зеленский отличается от предшественников.
Отдых за границей: куда украинцы чаще всего летали в 2019 году

Отдых за границей: куда украинцы чаще всего летали в 2019…

Лидеры рейтинга самых популярных направлений остаются те же, что и в 2018 году
Эрдоган пригрозил закрыть военную базу «Инджирлик» для США

Эрдоган пригрозил закрыть военную базу «Инджирлик» для США

Турция может закрыть "Инджирлик" для американцев в случае введения Вашингтоном санкций против Анкары. Запрет также может коснуться базы "Куречик", которая является частью системы ПРО НАТО в Европе.
Адвокат Трампа сделал сенсационное заявление об Украине

Адвокат Трампа сделал сенсационное заявление об Украине

Джулиани считает, что импичмент Трампу спланирован демократами
В Шотландии призвали Лондон не держать их «в союзе» против воли

В Шотландии призвали Лондон не держать их «в союзе» против…

Британские министры выступают против референдума о независимости Шотландии.
Украина вошла в рейтинг самых мощных стран мира

Украина вошла в рейтинг самых мощных стран мира

Украина официально признана мощнее Греции, Польши и Румынии
Путин заставил платить налоги самозанятых россиян

Путин заставил платить налоги самозанятых россиян

Налоговый режим для самозанятых собираются распространить на все регионы страны с лета 2020 года.
Новый год — 2020: во сколько обойдется праздничный стол

Новый год — 2020: во сколько обойдется праздничный стол

За деликатесы придется дополнительно заплатить еще 470 грн
Диетологи назвали лучший ужин для диабетиков

Диетологи назвали лучший ужин для диабетиков

Белковый салат с низким содержанием углеводов
Решена загадка каменных истуканов на острове Пасхи

Решена загадка каменных истуканов на острове Пасхи

Статуи, как верили рапануйцы, сохраняли плодородие земель.
Канада приглашает миллион мигрантов

Канада приглашает миллион мигрантов

Канада ждет высококвалифицированных специалистов.
Десятки тысяч украинцев в этом году остались без субсидий

Десятки тысяч украинцев в этом году остались без субсидий

Из-за неточностей в реестре льготников люди могут остаться без помощи.
Россия ответила на идею Японии забрать все Курильские острова

Россия ответила на идею Японии забрать все Курильские острова

Глава Компартии Японии Кадзуо Сии заявил, что самый быстрый способ вернуть южную часть Курильских островов — это потребовать у России весь архипелаг.
Мозг полярников уменьшился после года в Антарктиде

Мозг полярников уменьшился после года в Антарктиде

Ученые сделали важное открытие о влиянии жизни Антарктиде на мозг человека
Ракетный эсминец ВМС США вошел в Черное море

Ракетный эсминец ВМС США вошел в Черное море

Эсминец относится к кораблям типа «Арли Берк», построен на верфи Ingalls Shipbuilding.
У Трампа готовят наказание для Путину из-за Украины

У Трампа готовят наказание для Путину из-за Украины

Конгресс США встал на защиту украинцев, проживающих на временно оккупированных территориях
Названы популярные в Украине профессии с самым высоким заработком

Названы популярные в Украине профессии с самым высоким заработком

Лидируют специалисты в сфере транспорта и логистики
Зеленский нанял лоббистов, чтобы подружиться с Трампом, — NYT

Зеленский нанял лоббистов, чтобы подружиться с Трампом, — NYT

В американском издании заявили, что Зеленский прибегает к услугам лоббистских компаний США, чтобы вернуть расположение Трампа
Известный диетолог рассказала, как выбрать полезный хлеб

Известный диетолог рассказала, как выбрать полезный хлеб

В состав хлеба не должно входить более 10 ингредиентов и большое количество соли
Xiaomi представила компактный пылесос по самой низкой цене

Xiaomi представила компактный пылесос по самой низкой цене

Цена Roidmi Nano около $35
Климкин назвал города Украины, которые нужны Путину

Климкин назвал города Украины, которые нужны Путину

Путин планирует открыть пути ко всем сухопутным коридорам
«Слугу народа» избили по дороге домой двое неизвестных

«Слугу народа» избили по дороге домой двое неизвестных

Нардеп Михаила Ананченко написал об этом в Facebook и приложил фото с побоями
Германия задерживает запуск «Северного потока-2»

Германия задерживает запуск «Северного потока-2»

Газопровод уже считают прямой угрозой для энергетической безопасности Европейского Союза
Джулиани опубликовал материалы о невиновности Трампа, которые собрал в Украине

Джулиани опубликовал материалы о невиновности Трампа, которые собрал в Украине

Адвокат Джулиани утверждает, что есть все доказательства, указывающие на то, что Трамп "ничего плохого не сделал"
«ЛНР» требует согласовать поправки Зеленского в Конституцию Украины

«ЛНР» требует согласовать поправки Зеленского в Конституцию Украины

Главарь "ЛНР" заявил, что поправки Зеленского в Конституцию Украины необходимо согласовать в Минске 18 декабря
Зеленский впервые посетил концерт «95 квартала» как зритель

Зеленский впервые посетил концерт «95 квартала» как зритель

Зеленский "заглянул на огонек" к бывшим коллегам
Читай также