A IA do Google DeepMind se tornou o melhor jogador de StarCraft 2 do mundo

As plataformas de inteligência artificial da DeepMind tornaram-se famosas em todo o mundo nos últimos anos graças ao seu excelente domínio de jogos complexos e que exigem muito do cérebro, como xadrez, shogi e Go. Com o tempo, eles gradualmente “evoluíram”, derrotando nossos jogadores de carne e osso com técnicas avançadas de aprendizado de máquina.

No início deste ano, uma nova versão de um modelo de IA construído especificamente para o jogo de estratégia em tempo real StarCraft 2, chamado AlphaStar, foi apresentada pela DeepMind. AlphaStar também herdou muito bem a tradição de seus veteranos, o que envergonha as pessoas com suas vitórias esmagadoras sobre muitos dos melhores jogadores de StarCraft 2 do mundo na atualidade.

Depois de quase 10 meses de “cultivo”, AlphaStar se tornou literalmente o melhor “gamer” de StarCraft 2 do mundo! Mais especificamente, na quarta-feira, 30 de outubro, DeepMind publicou um novo estudo sobre AlphaStar na revista Nature, detalhando o quão longe esse modelo de IA avançou no mundo de StarCraft 2., e lamenta informar à comunidade de jogos de StarCraft 2 que AlphaStar agora ganhou a classificação Grandmaster, o que significa que este modelo de IA pode derrotar 99,8% de todos os jogadores de StarCraft 2 em todo o mundo.

A questão aqui é por que os pesquisadores estão construindo modelos de IA para um videogame de nicho e o que esse modelo de IA pode nos ensinar sobre inteligência artificial e tecnologia de aprendizado de máquina.

Se você não sabe, StarCraft 2 é um jogo de estratégia em tempo real onde os jogadores controlam uma de três equipes (ou “raças”, no jargão do jogo). Cada raça possui atributos únicos e o jogador deve controlar um exército de centenas de unidades em um grande mapa. Ao gerenciar recursos para construir unidades militares, os jogadores terão que atacar simultaneamente os inimigos e defender sua base. Com essa jogabilidade, existem inúmeras táticas e estratégias, das simples às complexas, que os jogadores podem aplicar com o objetivo final de vencer.

A complexidade e profundidade do jogo tornam-no um desafio significativo para a IA. Ao contrário do xadrez ou do Go, no mundo de StarCraft II os jogadores não podem ver o que seus oponentes estão fazendo. Além disso, embora o xadrez ou o Go permitam que você faça uma pausa e reflita sobre a estratégia - StarCraft II é um título em "tempo real", portanto, assim que o jogo começar, apenas a vitória ou a derrota importam.

DeepMind submeteu AlphaStar a um regime de treinamento bastante simples. Primeiro, assistiu a quase um milhão de replays dos melhores jogadores para aprender estratégias e encontrar maneiras de imitá-los. A AlphaStar foi então “competida” com outro modelo de IA da DeepMind para que pudesse concluir qual estratégia trazia os resultados mais ótimos em uma técnica chamada “aprendizado por reforço” (aprendizado por reforço). Este processo treina a IA mostrando-lhe que vencer é “bom” e perder é “ruim”.

Na verdade, AlphaStar também possui algumas vantagens sobre os humanos. Por exemplo, para uma pessoa normal, existem muitos fatores objetivos que podem limitar a capacidade de raciocínio do cérebro e a velocidade de reação a cada situação. Para ser justo, a equipe DeepMind atrapalhou intencionalmente o AlphaStar, atrasando o tempo de computação, a latência e limitando o número de ações que ele poderia realizar por minuto. Porém, a AlphaStar ainda sabe superar tudo e ter um desempenho excelente.

“Achei a jogabilidade do AlphaStar extremamente impressionante”, disse Dario “TLO” Wünsch, especialista alemão em StarCraft II, em comunicado. “O sistema é muito hábil em avaliar a sua posição estratégica e sabe exatamente quando atacar ou libertar o adversário.”

O fato de que as máquinas podem derrotar completamente os humanos em um videogame complexo pode parecer assustador como um cenário apocalíptico em que robôs invadem a Terra, mas na realidade, a equipe DeepMind desenvolve modelos de IA como o AlphaStar para melhorar outros sistemas do mundo real.

Para os pesquisadores, dominar um jogo complexo de estratégia em tempo real como StarCraft II é um dos primeiros passos para a criação de uma IA melhor e mais segura para aplicações que podem mudar a humanidade, como saúde, veículos autônomos e robótica.