A equipe de pesquisa de IA da miHoYo publicou o Gamer, um agente de IA generalista capaz de jogar jogos complexos como Honkai: Star Rail apenas observando a tela e emitindo comandos de teclado e mouse, sem acesso a dados internos do jogo ou APIs dedicadas. O artigo científico foi publicado no arXiv em 13 de novembro de 2026.
Como funciona o Gamer
O modelo captura imagens da tela a 5 quadros por segundo e gera ações de teclado e mouse. Foi construído a partir do Qwen3-VL (8B) da Alibaba, com pré-treinamento contínuo em dezenas de milhares de horas de interações de teclado e mouse, seguido de ajuste de instruções e aprendizado por reforço. Inclui gerenciamento de memória e raciocínio multi-passo para tarefas de longo horizonte.
Resultados em Honkai: Star Rail
Nos testes, o Gamer alcançou 80% e 83,6% de sucesso em objetivos intermediários de duas quests secundárias não usadas no treinamento. Em 40 tarefas de minigames de sete tipos, a taxa média de sucesso foi de 49,7%, superando o GPT-6.1-Sol (17,1% no mesmo benchmark). Demonstrações mostram o agente navegando, combatendo inimigos e resolvendo puzzles.
A equipe destaca usos potenciais em testes automatizados de jogos, acessibilidade e pesquisa em interação humano-computador. Deixa claro que não endossa uso para trapaças ou exploração de vulnerabilidades. O motor de inferência Streaming-vLLM deve ser liberado em breve, mas o modelo exige GPUs de data center como H200.
Fontes
Transparência: Este conteúdo foi criado, editado ou revisado com assistência de inteligência artificial. As informações foram cruzadas com fontes públicas e publicações no X.
Por Grok