Выигрыш Libratus свидетельствует о битве онлайн-покера против ботов

Большой историей в мире покера остается то, как программа искусственного интеллекта Libratus победила четырех элитных игроков в покер на $ 1 766 250. Как мы уже говорили, победа компьютера представляет реальную возможность того, что безлимитный техасский холдем является решаемой игрой.

Победа Libratus также вызывает больше опасений в связи с представлением о том, что онлайн-покер в конечном итоге наполнится ботами, которые будут доминировать на всех ставках и во всех играх.

Как вы, наверное, знаете, боты уже много лет успешно используются в покере с низкими ставками. Но вступаем ли мы сейчас в эпоху, когда даже игры на средних и высоких ставках будут небезопасными? Узнайте подробности битвы за то, чтобы ИИ не правили миром онлайн-покера.

Нетрадиционная, но оптимальная игра

Преимущество покерных ботов в том, что они могут играть бесконечное количество рук, не утомляясь. Но в безлимитных вариантах всегда считалось, что искусственный интеллект не может справиться со сложными нюансами безлимитных ставок. Однако это мнение было развеяно после того, как Libratus ликвидировал профи покера в Rivers Casino Pittsburgh.

Профессиональная команда, состоящая из Джимми Чоу, Донга Кима, Джейсона Леса и Даниэля Маколея, играла 1500 рук в день перед тем, как отдохнуть на ночь. По мере того как длилось месячное испытание, игроки выпили много кофе, чтобы не терять концентрацию. Лес сказал, что медленная игра Libratus тоже затянула вызов.

«Ожидание не должно на меня влиять», - сказал он Bloomberg. «Но иногда ты просто говоришь:« Хорошо, это еще не конец? »

В отличие от людей, Libratus играет медленнее всего в начале раздачи с маленькими банками, учитывая, что у него должно быть больше возможностей из-за большего количества фишек на руке. А иногда Libratus делает большие ставки из ниоткуда, что нетрадиционно и отбрасывает человеческих противников. Но машина сыграла достаточно хорошо, чтобы устроить первую компьютерную победу в безлимитном холдеме против профессионалов высшего уровня.

«Безлимитный холдем - это игра, которую вы видите на турнирах, и она имеет репутацию скорее искусства, чем науки», - объяснил Адам Кухарски, автор книги «Идеальная ставка: как наука и математика лишают удачи». азартных игр. «Была идея, что эта игра будет намного безопаснее на этих машинах».

Libratus - не единственный бот, побеждающий профессионалов в покере

Что говорит о будущем онлайн-покера, так это то, что Libratus - не единственный ИИ, побеждающий профессиональных игроков в покере. В начале января 2017 года исследователи из Университета Альберты написали статью на основе своей программы DeepStack, в которой победили 11 профессиональных игроков.

Туомас Сандхольм, один из ведущих разработчиков Libratus, отметил, что DeepStack не играет с первоклассными профессионалами. Майкл Боулинг, возглавлявший исследование DeepStack, согласен с утверждением Сандхольма.

Но Боулинг сказал, что его ИИ играл против профессионалов, когда они были более отдохнувшими, а не месяц подряд, как Libratus. DeepStack также победил профессионалов с отрывом в три раза больше, чем Libratus.

В чем оба согласны, так это в том, что покер, возможно, никогда не будет прежним, когда ИИ ловко победил людей в безлимитном холдеме. Они также отмечают, что покорение покера - это лишь небольшая часть тестирования программ, которые будут использоваться в медицине, кибербезопасности и многом другом.

«Это основной критерий, на котором остановилось сообщество, но эти алгоритмы не для покера», - сказал Сандхольм. «Они общего назначения».

Несмотря на то, что DeepStack и Libratus позиционируются для большего, чем покер, целей, их достижения показывают, что возможно для будущих покерных ботов в Интернете.

У соревнований другой формат, чем у обычного онлайн-покера

Хотя то, что сделали боты, впечатляет, важно помнить, что эти игры не происходят в точности так, как настоящий онлайн-покер. DeepStack и Libratus играют только хедз-ап, и количество фишек между ИИ и их противниками сбрасывается после каждой раздачи.

Это убирает часть психологии игры, поскольку игроки не могут использовать большие стеки для устрашения оппонентов. Эрик Холлрейзер, глава отдела коммуникаций PokerStars, сказал, что разница между вызовом и настоящим покером - это то, что в настоящее время защищает онлайн-игру.

«Несмотря на то, что в функциональном плане он имитирует игрока в покер, он очень далек от реальности того, что происходит за столами», - сказал он.

По мнению Холлрейзера, может пройти некоторое время, прежде чем боты будут готовы доминировать на высшем уровне в обычном интернет-покере. Но, как объяснил Крис Гроув из Online Poker Report, возможность постепенно приближается к реальности. «Если вы являетесь оператором онлайн-покера, это, вероятно, ваша проблема с мошенничеством номер один, и, вероятно, в довольно значительной степени».

Способы борьбы с покер-ботами

В PokerStars работает 70 сотрудников, единственная задача которых - искоренять покерных ботов и другие формы мошенничества. Каждый раз, когда обнаружение мошенничества подозревает бота, они звонят игрокам и спрашивают их, какую стратегию они использовали бы для определенных рук.

Другой метод поиска ботов заключается в том, чтобы просить игроков поиграть в течение часа, используя вращающуюся камеру, чтобы показать окружение и то, что человек действительно контролирует действие.

Очень важно, чтобы PokerStars и другие сайты делали все возможное для мониторинга ботов, потому что они могут получать прибыль 24/7, даже если они не являются элитными ИИ, такими как DeepStack и Libratus.

Как скоро ИИ догонят?

Не то чтобы четыре покерных профи, которые играли в Libratus, не выкладывались на полную. Они встречались каждое утро, чтобы поделиться утечками из компьютерной игры.

«В первые несколько дней мы обнаружили определенные эксплойты, - сказал Лес. «Мы напали на них и напали на них, и теперь они ушли».

Но Libratus также внесла коррективы, используя часть своих вычислительных мощностей для игры на руках, а часть - для улучшения. Ночью ИИ полностью переключился в режим обучения, используя 600 узлов (около 3000 компьютеров Macbook, работающих одновременно), чтобы улучшить свою покерную игру.

Позже Лес сказал, что пытался выяснить, как он мог бы использовать некоторые нетрадиционные методы Libratus в своей собственной игре. Но в конце концов он отказался от этой идеи. «У нас просто нет умственных способностей для этого», - сказал Лес.

Используя стратегию равновесия Нэша в покере, ИИ доказали, что они превосходят своих оппонентов-людей в хедз-апе. Но пока они не могут соревноваться с опытными игроками за многопользовательскими столами. Это потому, что многопользовательские игры призваны выявлять недостатки других игроков, а также использовать безупречную стратегию.

Как скоро компьютерные программы поймут этот аспект?

ИИ потребовалось более 20 лет, чтобы победить лучших профессионалов в хедз-апе. Но, учитывая быстрое улучшение этих машин в последнее время, у ботов может не потребоваться много времени, чтобы завоевать многопользовательские онлайн-игры.

Даже когда ИИ действительно добиваются превосходства в многопользовательском покере, мы можем, по крайней мере, рассчитывать на то, что отделы по обнаружению мошенничества на крупных сайтах помогут помешать этим программам управлять игрой.