Искусственный интеллект, похоже, превзошел человека в еще одной нише. На этот раз - в покере. Исследователи искусственного интеллекта компании Фейсбук и Университета Карнеги-Меллона разработали инновационный покерный бот. По утверждениям исследователей, Pluribus способен победить лучших мировых игроков в Техасский Холдем на шесть человек.
Исследование проводилось с участием живых покерных профессионалов. Покерный бот 12 дней поочередно играл с 12 профи в разных условиях. Сначала Pluribus играл вместе с пятью игроками-людьми. Потом - одновременно пять версий искусственного интеллекта играли с одним человеком-игроком. При этом версии играли “сами за себя” и не взаимодействовали друг с другом. Покерный бот выигрывал в среднем 5 долларов за раздачу с почасовым выигрышем 1000 долларов. По мнению исследователей - это «решающий предел победы».
«Можно с уверенностью сказать, что мы находимся на сверхчеловеческом уровне разработки, и планируем идти дальше», - сказал издательству The Verge научный сотрудник Facebook AI Research Ноам Браун.
«С Pluribus очень сложно играть. Его действительно сложно поймать на какой-либо руке», - заявил шестикратный чемпион Мировой серии по покеру Крис Фергюсон. Покерист был одним из 12, кто принимал участие в исследовании.
Издательству Science ученые прокомментировали свои прогнозы. Они сказали, что разработка покерного бота Pluribus - это переломная веха в развитии искусственного интеллекта. Силу ИИ ранее демонстрировали в исследованиях с различными играми, например, шахматами, Starcraft II и Dota. Но ученые считают, что покерная игра - более сложный процесс. То, что бот справляется с живыми игроками, подчеркивает особую важность исследования.
Еще в 2015 году система ИИ победила профессионалов в техасском холдеме для двух игроков. Но увеличение числа противников до пяти значительно увеличивает сложность разработки. Чтобы создать программу Браун и его коллега Туомас Сандхольм применили несколько важных стратегий.
Во-первых, они научили Pluribus играть в покер против своих копий. В исследовании этот процесс назвали “самостоятельной игрой”. Это распространенный метод обучения искусственного интеллекта, при котором система может изучать игру методом проб и ошибок. Процесс обучения был удивительно эффективным: окончательную версию покерного бота создали всего за восемь дней. Ученые использовали 64-ядерный сервер с 512 ГБ оперативной памяти. При этом обучение и комплектующие для программы обошлись всего в 150 долларов.
Затем исследователи внедрили в ИИ функцию поиска - перед каждым действием бот анализировал, какой ход сделать. Функция усовершенствовала бот и позволила играть против пяти соперников. Pluribus не предсказывает действия своих соперников до конца игры - ИИ заходит наперед только на 2-3 хода.
Pluribus также блефовал против своих оппонентов-профи. Соперники хвалили его «безжалостную последовательность» и то, как он выжимал прибыль из относительно слабых рук. Интересно, что в боте нет элементов машинного зрения или распознавания лиц и жестов.
Браун говорит, что это естественно. Люди часто думают, что блеф - это исключительно человеческая черта. Ученый считает, что это искусство, которое можно свести к математически оптимальным стратегиям.
«Искусственный интеллект не считает блеф обманом. Он просто видит решение, которое принесет больше всего денег в конкретной ситуации. Мы показали, что ИИ может блефовать лучше любого человека» - говорит Браун.
Исследователи надеются, что разработанный алгоритм Pluribus будут использоваться в других областях, например, в совершенствовании кибербезопасности и предотвращении мошенничества.
Портал об игорном бизнесе gamingpost.net следит за процессом легализации азартных игр в Украине. Читайте последние новости: Открытие казино Billionaire: эксклюзивный обзор от Gamingpost.net
Интервью: "В нашей индустрии всегда платят больше", - Марина Запольская о работе в сфере гэмблинга
Новости лотереи: Выигрыш от безысходности: мужчина сорвал джекпот в лотерею