Google DeepMind의 AI가 세계 최고의 스타크래프트 2 게이머가 되었습니다

딥마인드의 인공지능 플랫폼은 체스, 장기, 바둑 등 복잡하고 '뇌 집약적인' 게임에 대한 탁월한 숙달 덕분에 지난 몇 년 동안 전 세계적으로 유명해졌습니다. 시간이 지남에 따라 그들은 점차적으로 "진화"하여 고급 기계 학습 기술로 우리의 육혈 게이머를 물리쳤습니다.

올해 초 DeepMind는 실시간 전략 게임인 StarCraft 2용으로 특별히 제작된 AlphaStar라는 AI 모델의 새 버전을 출시했습니다. AlphaStar는 또한 선배들의 전통을 잘 이어받아 현재 세계 최고의 StarCraft 2 플레이어들을 상대로 압도적인 승리를 거두며 사람들을 부끄럽게 만들고 있습니다.

거의 10개월 간의 "개발" 끝에 AlphaStar는 이제 말 그대로 세계 최고의 스타크래프트 2 "게이머"가 되었습니다! 보다 구체적으로, 10월 30일 수요일, DeepMind는 Nature 저널에 AlphaStar에 대한 새로운 연구를 발표하여 이 AI 모델이 스타크래프트 2의 세계에서 얼마나 멀리 왔는지 자세히 설명했습니다. 그리고 현재 AlphaStar가 가지고 있는 사실을 스타크래프트 2 게임 커뮤니티에 알리게 되어 유감입니다. 그랜드마스터 등급을 획득했습니다. 이는 이 AI 모델이 전 세계 모든 스타크래프트 2 게이머의 99.8%를 물리칠 수 있다는 것을 의미합니다.

여기서 질문은 연구자들이 틈새 비디오 게임을 위한 AI 모델을 구축하는 이유와 이 AI 모델이 인공 지능과 기계 학습 기술에 대해 우리에게 무엇을 가르쳐 줄 수 있는지입니다.

모르신다면 스타크래프트 2는 플레이어가 세 팀(또는 게임 용어로 "레이스") 중 하나를 제어하는 ​​실시간 전략 게임입니다. 각 종족은 고유한 속성을 가지고 있으며 플레이어는 대규모 지도에서 수백 개의 유닛으로 구성된 군대를 제어해야 합니다. 군사 유닛을 구축하기 위해 자원을 관리하는 동안 플레이어는 적을 공격하는 동시에 기지를 방어해야 합니다. 이러한 게임플레이에는 플레이어가 승리라는 궁극적인 목표를 가지고 적용할 수 있는 단순한 것부터 복잡한 것까지 셀 수 없이 많은 전술과 전략이 있습니다.

게임의 복잡성과 깊이로 인해 AI에게는 중요한 과제가 됩니다. 체스나 바둑과 달리 스타크래프트 II의 세계에서는 플레이어가 상대방이 무엇을 하는지 볼 수 없습니다. 또한 체스나 바둑을 사용하면 잠시 멈추고 전략을 생각할 수 있지만 StarCraft II는 "실시간" 타이틀이므로 게임이 시작되면 승리 또는 패배만 중요합니다. 시계를 멈출 수 있습니다.

DeepMind는 AlphaStar를 매우 간단한 훈련 방법으로 활용했습니다. 첫째, 전략을 배우고 이를 모방하는 방법을 찾기 위해 거의 백만 번에 달하는 최고의 플레이어의 리플레이를 시청했습니다. 그런 다음 AlphaStar는 DeepMind의 다른 AI 모델과 "경쟁"하여 "강화 학습"(강화 학습)이라는 기술에서 어떤 전략이 가장 최적의 결과를 가져왔는지 결론을 내릴 수 있었습니다. 이 과정은 승리가 '좋음'이고 패배가 '나쁨'임을 보여줌으로써 AI를 훈련시킵니다.

실제로 AlphaStar는 인간에 비해 몇 가지 장점도 가지고 있습니다. 예를 들어, 정상적인 사람의 경우 각 상황에 대한 뇌의 사고 능력과 반응 속도를 제한할 수 있는 객관적인 요인이 많이 있습니다. 공평하게 말하면 DeepMind 팀은 의도적으로 AlphaStar를 방해하여 계산 시간과 대기 시간을 지연시키고 분당 수행할 수 있는 작업 수를 제한했습니다. 하지만 AlphaStar는 여전히 모든 것을 극복하고 훌륭하게 수행하는 방법을 알고 있습니다.

독일 스타크래프트 II 전문가인 Dario "TLO" Wünsch는 성명에서 "AlphaStar의 게임 플레이가 매우 인상적이라고 생각했습니다."라고 말했습니다. "이 시스템은 전략적 위치를 평가하는 데 매우 능숙하며 상대를 공격하거나 놓아줄 시기를 정확히 알고 있습니다."

복잡한 비디오 게임에서 기계가 인간을 완전히 물리칠 수 있다는 사실은 로봇이 지구를 침략하는 종말 시나리오처럼 무섭게 들릴 수도 있지만 실제로 DeepMind 팀은 다른 실제 시스템을 개선하기 위해 AlphaStar와 같은 AI 모델을 개발합니다.

연구자들에게 있어 스타크래프트 II와 같은 복잡한 실시간 전략 게임을 마스터하는 것은 의료, 자율주행 자동차, 로봇공학과 같이 인류를 변화시킬 수 있는 애플리케이션을 위한 더 좋고 안전한 AI를 만들기 위한 첫 번째 단계 중 하나입니다.