Искусственный разум обыграл всех лучших игроков в покер

11 Июля 2019

МОСКВА, 11 июля. Новая версия машинного интеллекта Libratus, выигравшего почти два миллиона долларов при игре в покер два года назад, смогла победить сразу пять чемпионов в эту карточную игру, игравших с ней за одним столом. Об этом пишут ее создатели в дневнике Science.

Игра сразу с пятью партнерами, а не с одним соперником, потребовала фундаментальных изменений в том, как ИИ вырабатывал свою стратегию. Мы рады тому, что Pluribus удалось справиться с этой задачей и сложить несколько инновационных приемов, которые, скорее всего, сменят то, как играют профессионалы, — заявил Ной Браун (Noam Brown) из университета Карнеги-Меллон в Питтсбурге (США).

За последние три года программисты и арифметики совершили настоящий прорыв в сферы создания систем искусственного разума, превосходящих человека в умении играть в определенные стратегические и целеустремленные игры.

К примеру, два не один месяца назад ученые создали ИИ AlphaGo, способный играть в древнекитайскую стратегию го лучше чемпионов Европы и мира. В этом году они представили ее ранее не известную версию, способную играть в любые настольные игры и компьюторный шутер Quake III Arena. 18 декабря 2017, 11:07Искусственный интеллект выиграл в покер почти два миллиона долларов

Помимо го, системам ИИ покорилась еще одна архисложная игра – покер. В марте 2016 года канадские программеры из университета Альберты создали деланный разум DeepStack, способный играть в одну из простейших версий покера. Ему удалось стать победителем в высокоуровневом международном матче, который проводился под эгидой Международной федерации покера.

Два года назад Браун и его коллега Туомас Сандхольм (Tuomas Sandholm) создали систему Libratus, которая умеет очень хорошо играть в покер и при этом мыслить абстрактно – находить общие черты в различных комбинациях карт, ставок и прочих элементов игры, и считать их примерно одним и тем же вариантом развития событий.

Это значительно упростило ее работу и позволило ей преодолеть ведущих игроков в техасский холдем, самый популярный вид покера, заработав на турнире почти два миллиона долларов. Сандхольм и Браун не остановились на этом и создали новую версию этой машины, Pluribus, способную играть в полноценный покер.

Дело в том, что Libratus не был приспособлен для игры за столом вместе с пятью-шестью другими игроками, как это обычно происходит в казино – он учился игре, разыгрывая партии с копией самого себя. Как знают все ценители карт, расширение числа теннисистов с двух до трех радикально меняет многие игры, в том числе и покер, что заставило ученых задуматься о том, как можно выучить этому их детище.

Для решения сей задачи ученые кардинально переработали логисту работы и обучения новой версии искусственного интеллекта, сделав ее еще более абстрактной и вмонтировал в нее систему, которую математики называют минимизацией сожалений. Под этим выражением ученые понимают процесс, в рамках которого машина вычисляет разницу между принятым ей решением и оптимальной тактикой действий и пытается уменьшить это значение. 3 марта 2017, 15:02Искусственный интеллект впервые преодолел лучших игроков в покер

Подобное расширение Libratus, как отмечают исследователи, не только позволило новой версии этой системы, Pluribus, играть сразу с несколькими антонами, но и резко сбавило нагрузку на компьютеры.

В тонкости, на весь процесс ее тренировки до сверхчеловеческого уровня ученые потратили лишь 150 долларов США, арендовав небольшое вычислительное облако всего на неделю. Вдобавок, в прошлом работа сей системы в режиме реального медли была возможной только на суперкомпьютере, тогда как сейчас ее можно запустить на мощном бытовом ПК с 28-ядерным процессором.

Работу Pluribus ученые проверили, заручившись опорой дюжины ведущих игроков, готовившихся к проведению очередной Мировой серии покера. В их число вошли Джейсон Лес, Дон Ким, Дэниэл Макоули и Джимми Чоу, уже игравшие с Libratus. Каждый из них выиграл более миллиона крючков за свою карьеру и неоднократно побеждал на десятках международных матчей.

Как и его предшественник, ранее не известная версия ИИ уверенно обыграла все людей, победив текущего лидера, Даррена Элиаса(Darren Elias), и заработав свыше 500 тысяч долларов за десять тысяч партий. При этом машинный интеллект выработал несколько парадоксальных или просто любопытных стратегий, которые люди в прошлом никогда не использовали или считали изначально проигрышными.

Главный плюс Pluribus – умение комбинировать разные стратегии. Это то, чего пытаются добиться многие теннисисты в покер. Мало у кого получается менять их случайным образом, но при этом оставаться в плюсе. Почти все люди не могут справиться с этой задачей, — поделился впечатлениями Элиас.

Успешная игра Pluribus, как почитают ученые, говорит о том, что искусственный интеллект в ближайшее время освоит и другие игры, в которых участвует больше двух игроков, а также научится решать другие работы, в которых нет толковых критериев победы или поражения. 3 июня, 17:13Самообучающийся здравый смысл AlphaZero научился играть в Quake III Arena

Редактор рубрики

Олег Кудрин

Место события на карте мира:

Искусственный разум обыграл всех лучших игроков в покер

комментарии (0)

Другие интересные новости

Михалков назвал ММКФ неангажированным в отличие от других фестивалей