“O SIMA dá um passo além e mostra uma generalização mais forte para novos jogos”, diz ele. “A quantidade de ambientes ainda é muito pequena, mas acho que a SIMA está no caminho certo.
Uma nova maneira de jogar
SIMA mostra a DeepMind dando um novo toque aos agentes de jogos, uma tecnologia de IA na qual a empresa foi pioneira no passado.
Em 2013, antes da DeepMind ser adquirida pelo Google, a startup com sede em Londres mostrou como uma técnica chamado aprendizado por reforço, que envolve treinar um algoritmo com feedback positivo e negativo sobre seu desempenho, poderia ajudar os computadores a jogar jogos clássicos Videogames Atari. Em 2016, como parte do Google, a DeepMind desenvolveu o AlphaGo, um programa que usou a mesma abordagem para derrotar um campeão mundial de Go, um antigo jogo de tabuleiro que requer habilidade sutil e instintiva.
Para o projeto SIMA, a equipe do Google DeepMind colaborou com vários estúdios de jogos para coletar dados de teclado e mouse de humanos jogando 10 jogos diferentes em ambientes 3D, incluindo Céu de ninguém, Destruir, Hidroneere Satisfatório. Posteriormente, a DeepMind adicionou rótulos descritivos a esses dados para associar os cliques e toques às ações realizadas pelos usuários, por exemplo, se eram uma cabra procurando seu jetpack ou um personagem humano procurando ouro.
Os dados coletados pelos jogadores humanos foram então inseridos em um modelo de linguagem do tipo que alimenta os chatbots modernos, que adquiriram a capacidade de processar a linguagem ao digerir um enorme banco de dados de texto. O SIMA poderia então realizar ações em resposta aos comandos digitados. E, finalmente, os humanos avaliaram os esforços do SIMA em diferentes jogos, gerando dados que foram usados para ajustar seu desempenho.
Depois de todo esse treinamento, o SIMA é capaz de realizar ações em resposta a centenas de comandos dados por um jogador humano, como “Vire à esquerda” ou “Vá para a nave” ou “Passe pelo portão” ou “Derrube uma árvore. ” O programa pode realizar mais de 600 ações, que vão desde a exploração ao combate até o uso de ferramentas. Os pesquisadores evitaram jogos que apresentassem ações violentas, em linha com as diretrizes éticas do Google sobre IA.
“Ainda é um projeto de pesquisa”, diz Tim Harley, outro membro da equipe do Google DeepMind. “No entanto, pode-se imaginar um dia ter agentes como a SIMA jogando ao seu lado em jogos com você e seus amigos.”
Os videogames fornecem um ambiente relativamente seguro para encarregar os agentes de IA de fazer coisas. Para que os agentes possam realizar trabalhos úteis de escritório ou administrativos diários, eles precisarão se tornar mais confiáveis. Harley e Besse, da DeepMind, dizem que estão trabalhando em técnicas para tornar os agentes mais confiáveis.
Atualizado em 13/03/2024, 10h20 ET: Adicionado comentário de Linxi “Jim” Fan.
