Eles conectaram o GPT-4 ao Minecraft e descobriram um novo potencial para IA

A tecnologia que sustenta que o ChatGPT tem potencial para fazer muito mais do que apenas conversar. Linxi “Jim” Fan, um pesquisador de IA da fabricante de chips Nvidia, trabalhou com alguns colegas para criar uma maneira de definir o poderoso modelo de linguagem GPT-4 – o “cérebro” por trás do ChatGPT e um número crescente de outros aplicativos e serviços – solto dentro o videogame em blocos Minecraft.

A equipe da Nvidia, que incluía Anima Anandkumar, diretor de aprendizado de máquina da empresa e professor da Caltech, criou um bot do Minecraft chamado Voyager que usa GPT-4 para resolver problemas dentro do jogo. O modelo de linguagem gera objetivos que auxiliam o agente a explorar o jogo, e códigos que melhoram a habilidade do bot no jogo ao longo do tempo.

O Voyager não joga como uma pessoa, mas pode ler o estado do jogo diretamente, por meio de uma API. Ele pode ver uma vara de pescar em seu inventário e um rio próximo, por exemplo, e usar o GPT-4 para sugerir o objetivo de pescar para ganhar experiência. Ele usará esse objetivo para que o GPT-4 gere o código necessário para que o personagem o alcance.

A parte mais inovadora do projeto é o código que o GPT-4 gera para adicionar comportamentos ao Voyager. Se o código sugerido inicialmente não funcionar perfeitamente, a Voyager tentará refiná-lo usando mensagens de erro, feedback do jogo e uma descrição do código gerado pelo GPT-4.

Com o tempo, a Voyager constrói uma biblioteca de códigos para aprender a fazer coisas cada vez mais complexas e explorar mais o jogo. Um gráfico criado pelos pesquisadores mostra o quão capaz ele é comparado a outros agentes do Minecraft. A Voyager obtém mais de três vezes mais itens; explora mais que o dobro; e constrói ferramentas 15 vezes mais rápido do que outros agentes de IA. Fan diz que a abordagem pode ser melhorada no futuro com a adição de uma maneira de o sistema incorporar informações visuais do jogo.

Embora chatbots como o ChatGPT tenham impressionado o mundo com sua eloquência e aparente conhecimento – mesmo que muitas vezes inventem coisas – a Voyager mostra o enorme potencial dos modelos de linguagem para realizar ações úteis em computadores. Usar modelos de linguagem dessa maneira talvez pudesse automatizar muitas tarefas rotineiras de escritório, potencialmente um dos maiores impactos econômicos da tecnologia.

O processo que a Voyager usa com o GPT-4 para descobrir como fazer as coisas no Minecraft pode ser adaptado para um assistente de software que descubra como automatizar tarefas por meio do sistema operacional em um PC ou telefone. A OpenAI, a startup que criou o ChatGPT, adicionou “plugins” ao bot que permitem interagir com serviços online, como o aplicativo de entrega de supermercado Instacart. A Microsoft, proprietária do Minecraft, também está treinando programas de IA para jogá-lo, e a empresa anunciou recentemente o Windows 11 Copilot, um recurso do sistema operacional que usará aprendizado de máquina e APIs para automatizar determinadas tarefas. Pode ser uma boa ideia experimentar esse tipo de tecnologia dentro de um jogo como o Minecraft, onde o código defeituoso pode causar relativamente pouco dano.

Os videogames há muito são uma plataforma de teste para algoritmos de IA, é claro. AlphaGo, o programa de aprendizado de máquina que dominou o jogo de tabuleiro extremamente sutil Go em 2016, começou a jogar videogames Atari simples. O AlphaGo usou uma técnica chamada aprendizado por reforço, que treina um algoritmo para jogar um jogo, dando feedback positivo e negativo, por exemplo, da pontuação dentro de um jogo.

É mais difícil para este método guiar um agente em um jogo aberto como Minecraft, onde não há pontuação ou conjunto de objetivos e onde as ações de um jogador podem não compensar até muito mais tarde. Quer você acredite ou não que devemos nos preparar para conter a ameaça existencial da IA ​​agora, o Minecraft parece um excelente playground para a tecnologia.