Libratus - inteligența artificială tocmai a învins 4 experți într-un joc de poker

Inteligența artificială Libratus tocmai a învins 4 maeștri în jocul de poker, datorită unei noi metode de antrenament AI , în locul tehnicilor convenționale actuale.

Timp de aproape trei săptămâni, Dong Kim a stat la un cazinou din Pittsburgh și a jucat poker cu o mașină. Cu toate acestea, Dong Kim nu este doar un jucător de poker obișnuit și mașina pe care o joacă nu este o mașină de poker obișnuită ca celelalte.

Dong Kim , în vârstă de 28 de ani, este unul dintre cei mai buni jucători de poker din lume. Între timp, cealaltă mașină de poker - Libratus, creată de doi cercetători în informatică de la Universitatea Carnegie Mellon, este doar un sistem de inteligență artificială care rulează pe un supercomputer din Pittsburgh . Timp de 20 de zile consecutiv, patru maeștri de poker s-au luptat cu Libratus în Texas Hold'Em no-limit , o formă deosebit de complexă de poker care include strategii de pariere pentru a ajuta jucătorii Jucătorii trebuie să depășească zeci de cărți.

La jumătatea meciului, Dong Kim a început să simtă că aparatul de poker Libratus îi poate vedea cărțile. „ Nu cred că înșală. Cred doar că este foarte bine ”, a spus Dong Kim. Este grozav, de fapt, Libratus nu numai că l-a învins pe Dong Kim, dar a învins și alți trei jucători de poker de top din lume - pentru prima dată când o inteligență artificială a reușit să facă acest lucru.

Pe tot parcursul competiției, creatorii Libratus au rămas reticenți în a împărtăși modul în care funcționează acest sistem de inteligență artificială – cum are atât de mult succes, cum poate fi imitat în mod direct, percep oamenii într-un mod în care nicio mașină nu a putut să-l facă vreodată. Cu toate acestea, conform a ceea ce au dezvăluit cercetătorii, Libratus a atins nivelul de a fi mai mult decât o simplă IA, dar se bazează pe trei sisteme distincte care lucrează împreună.

Rețineți că IA-urile moderne de astăzi sunt operate de mai multe tehnologii în același timp, nu de o singură tehnologie. Rețelele neuronale profunde au atras multă atenție în ultimele zile și din motive întemeiate: „ Ele alimentează totul, de la recunoașterea imaginilor la traducerea limbilor și la căutare. găsiți produse cheie ale celor mai mari companii de tehnologie din lume. Cu toate acestea, succesul rețelelor neuronale artificiale, de asemenea aduce o gură de aer proaspăt multor alte tehnici AI, ajutând computerele să imite sau chiar să depășească talentul uman ”.

Cu toate acestea, Libratus nu folosește această rețea neuronală artificială. Libratus se bazează în primul rând pe o altă formă de IA, cunoscută și sub numele de „ Învățare prin consolidare ”, o metodă extrem de riguroasă de încercare și eroare. În esență, aparatul de poker Libratus joacă jocul împotriva lui însuși iar și iar.

Deep Mind Lab de la Google a folosit învățarea prin consolidare pentru a construi AlphaGo, sistemul care l-a învins pe jucătorul mondial Lee Sedol la începutul anului trecut. Cu toate acestea, există o diferență importantă între aceste două sisteme. AlphaGo a învățat să joace Go analizând 30 de milioane de mișcări umane, înainte de a-și modela abilitățile jucând împotriva lui însuși. Dar Libratus este opusul, el învață să joace poker complet de la zero.

Printr-un algoritm numit Counterfactual Regret Minimization , a început prin a juca aleatoriu și, în cele din urmă, după luni de antrenament cu trilioane de mâini de poker, a atins Nivelul nu numai că îi provoacă pe cei mai buni jucători, ci și joacă într-un mod în care cei mai buni jucători nu pot – juca cu o gamă mai largă de pariuri și randomizați aceste pariuri. Prin urmare, va fi mai dificil pentru adversari să ghicească cărțile pe care le deține Libratus.

„ Oferim AI o descriere a jocului. Nu îi spunem cum să joace. Apoi dezvoltă o strategie care este complet independentă de jocul uman și poate fi foarte diferită de modul în care oamenii joacă acest joc” , a spus Noam. Brown, student la master la Universitatea Carnegie Mellon - CMU, care a creat acest sistem AI împreună cu profesorul său, Tuomas Sandholm.

Cu toate acestea, aceasta este doar prima etapă. În timpul meciului de la Pittsburgh, un al doilea sistem analizează starea meciului și se concentrează asupra atenției primului sistem. Cu ajutorul acestui al doilea sistem, un detaliu „ endgamer ” într-o lucrare Sandholm and Brown, primul sistem nu trebuie să parcurgă toate scenariile pe care le poate explora. a izbucnit în trecut. Și trebuie doar să parcurgă câteva dintre aceste scenarii. Ceea ce este special este că Libratus nu învață doar înainte de joc, ci continuă să învețe chiar și în timpul jocului.

Deși numai aceste două sisteme sunt mai mult decât suficiente pentru a juca poker eficient. Dar Dong Kim și alți jucători au găsit în continuare modele în jocul computerului și le-au exploatat. De aceea Brown și Sandholm au creat un al treilea sistem. În fiecare seară, Brown va rula un algoritm care poate identifica acele modele și le poate elimina. „ Poate face acest calcul peste noapte și totul va fi gata a doua zi ”, a spus Brown.

Dacă simți că asta pare nedrept, trebuie totuși să-l accepți, pentru că așa funcționează AI. Cu toate acestea, nu numai AI face acest lucru, ci și oamenii pot combina adesea procesele, îmbunătățind, rulând și îmbunătățind activ AI. Pe scurt, Libratus este cu adevărat o piatră de hotar, arătându-ne cum un nou tip de IA ar putea juca un rol important în orice, de la tranzacționarea pe Wall Street până la securitatea cibernetică, licitații și negocieri politice.

„ Pokerul este unul dintre cele mai greu jocuri în care AI să pătrundă, pentru că vezi doar informații parțiale despre starea jocului. Nu există o singură mișcare optimă. În schimb, AI-ul va trebui să-și randomizeze acțiunile pentru a face adversarii nesiguri când va îi înșeală ”, a spus Andrews Ng, care a susținut laboratorul central de inteligență artificială al Google și este acum om de știință șef la Baidu.

Libratus a făcut asta cel mai bine. Își randomizează pariurile la un nivel care depășește gândirea chiar și a celor mai buni jucători. Și dacă asta nu funcționează, algoritmul lui Brown va umple golurile. Un comerciant financiar poate lucra în același mod. Același lucru se întâmplă și cu un diplomat. Așadar, Libratus face o declarație puternică: O mașină poate păcăli un om.

Consultați mai multe articole:

• Inteligența artificială învață cum să creeze o altă inteligență artificială, înlocuind oamenii în viitor
• Visul Hyperloop va fi finalizat până la sfârșitul anului 2017 în Europa de Est
• Femeile nu au fost niciodată inferioare bărbaților, iată 4 mari invenții care au schimbat lumea

A te distra!