https://blog.openai.com/neural-mmo/

OpenAI에서 새로운 강화학습 환경을 공개했습니다. 기존에 있던 OpenAI Gym은 슈퍼마리오나 블록격파처럼 싱글 게임에 최적화되어 있습니다. 이번에 발표한 Neural MMO는 멀티 에이전트를 위한 가상 환경입니다.

거의 온라인 게임과 비슷하다고 보면 됩니다. 128개의 에이전트가 동시에 동작하는데 랜덤하게 만들어진 타일맵을 돌아다닙니다. 물이나 음식 타일에 가면 체력을 회복하고, 다른 에이전트를 만나면 밀리, 원거리, 마법사 타입에 따라 전투를 합니다. 한 턴마다 보상을 1씩 받는데, 오래 살아남도록 행동을 학습합니다.

훈련 결과를 보면 최대한 경쟁을 피하기 위해 맵 전체로 넓게 퍼지는 경향을 보인다고 합니다. 호모 사피엔스가 아프리카에서 시작하여 새로운 땅을 찾아 전 세계로 이동한 것과 비슷한 것 같습니다.