Google DeepMind lança o benchmark Multimodal Knowledge Agent

O Google DeepMind, em parceria com a Artificial Analysis, apresentou o benchmark Multimodal Knowledge Agent (MKA) em 10 de novembro de 2026. O MKA avalia como os agentes de IA raciocinam sobre arquivos visualmente complexos para concluir tarefas reais de trabalho de conhecimento, e nos testes iniciais o Gemini 4 Carbon ficou em segundo lugar em qualidade entre os modelos testados, com um custo em média seis vezes menor do que o do modelo com a melhor pontuação.

O que o benchmark abrange

• O benchmark inclui 200 tarefas de avaliação privadas, com 10 tarefas públicas disponibilizadas no Hugging Face
• As tarefas abrangem 10 setores e 83 profissões, incluindo arquitetos, biólogos, subscritores de seguros e cientistas de dados
• Cada tarefa corresponde a 3 a 8 horas de trabalho profissional
• A pontuação é ponderada em 75% de precisão factual e 25% de design visual, avaliada por um classificador automático que concorda com a avaliação de especialistas humanos em 96% das vezes
• Os modelos testados usaram em média de 30 a 130 turnos por meio do ambiente de agentes de código aberto Stirrup

O que isso significa para quem constrói com IA

Para quem constrói fluxos agênticos de codificação e de trabalho de conhecimento, o MKA adiciona uma nova régua além dos rankings baseados apenas em texto, voltada a tarefas profissionais visuais e de várias horas. O resultado de o Gemini 4 Carbon ter ficado em segundo lugar em qualidade com um custo seis vezes menor do que o modelo com a melhor pontuação dá a quem constrói um equilíbrio concreto entre custo e qualidade a considerar ao escolher um modelo para agentes que precisam ler arquivos visualmente complexos e produzir resultados de nível profissional.

Disponibilidade

As 10 tarefas públicas do MKA estão disponíveis no Hugging Face, e o ambiente de avaliação usado para testar os modelos, Stirrup, é de código aberto, o que permite que desenvolvedores verifiquem o formato das tarefas e o ciclo do agente usado para avaliar a precisão factual e o design visual.

Fontes

• Introducing the Multimodal Knowledge Agent benchmark (Google, 10 de novembro de 2026, oficial)

Escrito com ajuda de IA, apenas a partir das fontes listadas acima. Antes de ir ao ar, verificações automáticas conferiram as datas, as fontes e todas as versões de idioma.