Spilvraag in het debat: kan een computer beteren pokeren dan een mens? Om een antwoord te bieden op deze moeilijke vraag werd door de Amerikaanse Carnegie Mellon University het Brains vs. AI pokertoernooi opgezet. Doel van de test is om één van de beide kampen te kwalificeren als de beste poker speler.
Opzet Brains vs. AI pokertoernooi
Het Brains vs. AI pokertoernooi is een 20-dagen durend pokertoernooi waarbij vier professionele pokerspelers (Jason Les, Dong Kim, Daniel McAulay en Jimmy Chou) het opnemen tegen een computerprogramma in een strijd om een prijzenpot van 200.000 dollar. Het computerprogramma dat steunt op artificiële intelligentie (AI) of kunstmatige intelligentie, Libratus, werd door het Pittsburgh Supercomputing Center (PSC) ontwikkeld om specifiek Heads-Up, No-Limit Texas Hold’em te spelen. Heads-Up, No-Limit Texas Hold’em is een variant op de klassieke Texas Hold’em, waarbij twee spelers het rechtstreeks tegen elkaar opnemen en er geen limiet staat op hoeveel men kan inzetten in de loop van het spel.
De manier waarop Libratus speelt is geheel verschillend als dat van fysieke poker spelers aldus de onderzoekers. Libratus maakt geen gebruik van menselijke pokerervaring, maar wel van algoritmes op basis waarvan het een eigen strategie ontwikkelt. Om zijn huidige strategie te ontwikkelen had Libratus 15 miljoen core uren nodig. Wanneer tijdens het Brains vs. AI toernooi de fysieke pokerspelers gaan slapen, wordt Libratus aan het net gekoppeld om nieuwe algoritmes te ontwikkelen. Uniek aan Libratus is dat de algoritmes niet specifiek werden ontwikkeld voor poker, maar kunnen benut worden in diverse domeinen van de maatschappij. Zo kunnen de algoritmes later ingeschakeld worden voor zakelijke onderhandelingen, medicijnen, cyberveiligheid en –beveiliging, veilig enz.
Tussenstand en succes Libratus
Tot op heden heeft het Brains vs. AI pokertoernooi een duidelijke winnaar: AI. Na de eerste speeldag had AI reeds iets meer dan 81.000 dollar bijeen gespeeld, terwijl de menselijke spelers het met een maar 7.200 dollar moesten doen. Twee jaar geleden werd ook een dergelijk Brains vs. AI pokertoernooi georganiseerd, waarbij AI (toen onder de naam Claudico) toen wel nog het onderspit moest delven voor de mens.
“Ik voelde dat Libratus veel beter speelt dan Claudico dat deed in de vorige uitdaging,” aldus Jason Les, één van de pokerspelers. Hij zegt dat de AI er nu veel beter in slaagt om zijn strategie aan te passen op basis van de context en onvoorspelbaar te spelen. Dat was de zwakte van Claudico: het systeem had geen problemen met het berekenen van statistische kansen, maar het algoritme struikelde nog over het differentiëren van de waarde van de kaarten die het in de hand had. Dat zorgde ervoor dat de blufs die Claudico in de eindrondes deed vaak doorzichtig waren, iets waar zijn tegenstanders handig gebruik van maakten.
De ontwikkelaars van Libratus hebben nu getracht deze voorspelbaarheid weg te werken via de zogenaamde “nested endgame solving”. “Dit maakt het mogelijk voor de bot om ter plekke nieuwe strategieën te berekenen die het beste de acties van de mensen pareren, terwijl het garandeert dat onze strategie gebalanceerd blijft zodat de mensen er niet van kunnen profiteren,” verklaart Noam Brown, één van de studenten die meegeholpen heeft om Libratus te ontwikkelen.
Hoogdagen artificiële intelligentie
De technologie van AI is niet nieuw. Integendeel. Reeds in het verleden werden menselijke spelers reeds geconfronteerd met computertechnologieën tijdens bv. schaken en GO. Voor beide spelen moest de mens reeds het onderspit delven.
Het verschil tussen schaken en GO enerzijds, en poker anderzijds, is dat de spelers / computer bij aanvang van het spel niet beschikken over alle informatie. Wanneer Libratus ook nu zou slagen om de menselijke spelers te verslagen, dan heeft AI een nieuwe mijlpaal neergezet. Immers, dit toont aan dat artificiële intelligentie ook kan werken in situaties waarbij men niet over alle informatie beschikt. Welnu, in het dagelijkse leven van de mens zijn er talloze situaties waar men niet over alle informatie beschikt. Libratus kan dus bijdragen aan verdere ontwikkelingen in het dagelijkse leven.