Feb. 11, 2017
Libratus 'Gewinn hebt den Kampf des Online-Pokers gegen Bots hervor
By RTR Dennis
Die große Geschichte in der Pokerwelt bleibt, wie das KI-Programm Libratus vier Elite-Pokerspieler um 1.766.250 $ besiegte. Wie wir bereits besprochen haben, bietet der Sieg des Computers eine realistische Möglichkeit, dass Texas Hold'em ohne Limit ein gelöstes Spiel ist.
Der Sieg von Libratus erzeugt auch mehr Angst vor der Vorstellung, dass Online-Poker irgendwann mit Bots gefüllt sein wird, die alle Einsätze und Spiele dominieren.
Wie Sie vielleicht wissen, werden Bots seit Jahren erfolgreich beim Low-Stakes-Poker eingesetzt. Aber treten wir jetzt in ein Zeitalter ein, in dem nicht einmal Maßnahmen mit mittlerem und hohem Einsatz sicher sind? Finden Sie heraus, wie wir den Kampf um die Verhinderung der Online-Pokerwelt durch AIs beschreiben.
Unkonventionelles, aber optimales Spiel
Der Vorteil von Poker Bots ist, dass sie unendlich viele Hände spielen können, ohne zu ermüden. Bei No-Limit-Varianten wurde jedoch immer angenommen, dass künstliche Intelligenz die komplexen Nuancen von No-Limit-Wetten nicht beherrschen kann. Diese Vorstellung wurde jedoch durch Libratus 'Abbau der Pokerprofis im Rivers Casino Pittsburgh zunichte gemacht.
Das Pro-Team von Jimmy Chou, Dong Kim, Jason Les und Daniel McAulay spielte 1.500 Hände pro Tag, bevor es sich für die Nacht ausruhte. Während die einmonatige Herausforderung weiterging, tranken die Spieler viel Kaffee, um konzentriert zu bleiben. Les sagte, dass das langsame Spiel von Libratus die Herausforderung ebenfalls in die Länge zog.
"Das Warten sollte mich überhaupt nicht betreffen", sagte er zu Bloomberg. "Aber manchmal sagst du nur 'OK, wird das schon vorbei sein?"
Im Gegensatz zu Menschen spielt Libratus zu Beginn der Hände mit kleinen Töpfen am langsamsten, da er aufgrund der größeren Chips mehr Möglichkeiten durchlaufen muss. Und manchmal macht Libratus große Einsätze aus dem Nichts, was unkonventionell ist und menschliche Gegner abschreckt. Aber die Maschine spielte gut genug, um den ersten No-Limit-Hold'em-Sieg für einen Computer gegen hochkarätige Profis zu erzielen.
"No-Limit Hold'em ist das Spiel, das man in Turnieren sieht, und es hat den Ruf, eher eine Kunst als eine Wissenschaft zu sein", erklärte Adam Kucharski, Autor von The Perfect Bet: Wie Wissenschaft und Mathematik das Glück herausnehmen des Glücksspiels. "Es gab die Idee, dass dieses Spiel von diesen Maschinen aus viel länger sicher sein würde."
Libratus ist nicht der einzige Bot, der Poker-Profis schlägt
Was über die Zukunft des Online-Pokers aussagt, ist, dass Libratus nicht die einzige KI ist, die Pokerprofis schlägt. Anfang Januar 2017 haben Forscher der University of Alberta auf der Grundlage ihres Programms DeepStack einen Artikel verfasst, in dem elf professionelle Spieler besiegt wurden.
Tuomas Sandholm, einer der Hauptentwickler von Libratus, wies darauf hin, dass DeepStack keine hochkarätigen Profis spielte. Michael Bowling, der die Forschung zu DeepStack leitete, stimmt Sandholms Behauptung zu.
Aber Bowling sagte, dass seine KI gegen Profis spielte, wenn sie ausgeruht waren, und nicht einen Monat lang wie Libratus. DeepStack besiegte die Profis auch dreimal so groß wie Libratus.
Beide Männer sind sich einig, dass Poker jetzt, wo die KI die Menschen ohne Grenzen besiegt hat, niemals mehr dasselbe sein kann. Sie weisen auch darauf hin, dass die Eroberung des Pokers nur ein kleiner Teil des Testens von Programmen ist, die für Medizin, Cybersicherheit und mehr verwendet werden.
"Dies ist der wichtigste Maßstab, auf den sich die Community festgelegt hat, aber diese Algorithmen sind nicht für Poker geeignet", sagte Sandholm. "Sie sind universell einsetzbar."
Obwohl DeepStack und Libratus für größere Zwecke als Poker positioniert sind, zeigen ihre Fortschritte, was für zukünftige Internet-Poker-Bots möglich ist.
Die Herausforderungen haben ein anderes Format als reguläres Online-Poker
Während das, was die Bots getan haben, beeindruckend ist, ist es wichtig zu bedenken, dass diese Spiele nicht genau wie echtes Online-Poker stattfinden. DeepStack und Libratus spielen nur Heads-up-Matches und die Anzahl der Chips zwischen den AIs und ihren Gegnern wird nach jeder Hand zurückgesetzt.
Dies nimmt einen Teil der Psychologie aus dem Spiel, da die Spieler keine großen Stapel verwenden können, um Gegner einzuschüchtern. Eric Hollreiser, Leiter Kommunikation bei PokerStars, sagte, dass der Unterschied zwischen der Herausforderung und echtem Poker das ist, was das Online-Spiel derzeit schützt.
"Während es auf einer funktionalen Hand-für-Hand-Basis den Pokerspieler nachahmt, ist es weit entfernt von der Realität dessen, was an Tischen passiert", sagte er.
Nach Hollreisers Meinung kann es eine Weile dauern, bis Bots bereit sind, das höchste Niveau des regulären Internet-Pokers zu dominieren. Aber wie Chris Grove vom Online Poker Report erklärte, nähert sich die Möglichkeit der Realität. "Wenn Sie ein Online-Poker-Betreiber sind, ist dies wahrscheinlich Ihr größtes Betrugsproblem, und zwar mit ziemlich großem Abstand."
Methoden zur Bekämpfung von Poker Bots
PokerStars hat 70 Mitarbeiter, deren einzige Aufgabe es ist, Poker-Bots und andere Formen von Betrug auszurotten. Jedes Mal, wenn die Betrugserkennung einen Bot vermutet, rufen sie die Spieler an und fragen sie, welche Strategie sie für bestimmte Hände anwenden würden.
Eine andere Methode, um Bots zu finden, besteht darin, die Spieler zu bitten, eine Stunde lang mit einer rotierenden Kamera zu spielen, um die Umgebung zu zeigen, und dass die Person tatsächlich die Aktion kontrolliert.
Es ist sehr wichtig, dass PokerStars und andere Websites alles tun, um Bots zu überwachen, da sie rund um die Uhr Gewinne erzielen können, auch wenn sie keine Elite-AIs wie DeepStack und Libratus sind.
Wie lange dauert es, bis die AIs aufholen?
Es ist nicht so, als würden die vier Pokerprofis, die Libratus spielten, nicht alles geben. Sie trafen sich jeden Morgen, um Lecks im Computerspiel zu teilen.
"Es gab bestimmte Exploits, die wir in den ersten Tagen identifiziert haben", sagte Les. "Wir haben sie angegriffen und angegriffen, und jetzt sind sie weg."
Libratus nahm jedoch auch Anpassungen vor, indem er einen Teil seiner Rechenleistung zum Spielen der Hände und einen anderen Teil zum Verbessern verwendete. Nachts wechselte die KI vollständig in den Lernmodus und verwendete 600 Knoten (ca. 3.000 Macbooks arbeiten gleichzeitig), um ihr Pokerspiel zu verbessern.
Danach sagte Les, er habe versucht herauszufinden, wie er einige der unkonventionellen Techniken von Libratus in seinem eigenen Spiel einsetzen könne. Aber am Ende gab er diesen Gedanken auf. "Wir haben einfach nicht die geistige Fähigkeit, dies zu tun", sagte Les.
Mit der Nash Equilibrium-Strategie beim Poker haben sich AIs als überlegen gegenüber ihren menschlichen Gegnern erwiesen. Derzeit können sie jedoch nicht an erfahrenen Mehrspieler-Tischen gegen erfahrene Spieler antreten. Das liegt daran, dass es bei Multiplayer-Spielen genauso darum geht, die Fehler anderer Spieler zu identifizieren, wie sie eine perfekte Strategie anwenden.
Wie lange dauert es, bis Computerprogramme diesen Aspekt herausfinden?
Es dauerte über 20 Jahre, bis eine KI in einer Heads-up-Situation Top-Profis besiegte. Angesichts der raschen Verbesserung dieser Maschinen in letzter Zeit kann es jedoch nicht so lange dauern, bis Bots Online-Multiplayer-Spiele erobert haben.
Selbst wenn AIs im Mehrspieler-Poker überlegen sind, können wir uns zumindest auf die Betrugserkennungsabteilungen an wichtigen Standorten verlassen, um zu verhindern, dass diese Programme das Spiel regieren.