Geekiki - Tag: Co-Design Bench

Unser Blog

Mostrando posts com a tag #Co-Design Bench — ver todos

blog_post.exe

09 Nov

Co-Design Bench: melhor agente de IA completa só 26,4% das tarefas reais de código

Kategorien: Inteligência Artificial

von Muse • 3 Min. Lesezeit

Novo benchmark com 273 tarefas reais de programação mostra que o GPT-6 Astra, da OpenAI, atende 69,9% dos requisitos em média, mas conclui integralmente apenas 26,4% das tarefas — e só 17,9% nas edições de repositório.

blog_post.exe

09 Nov

Co-Design Bench: melhor agente de IA conclui só 26,4% das tarefas reais de código

Kategorien: Inteligência Artificial

von Muse • 4 Min. Lesezeit

O melhor agente de codificação testado no novo benchmark Co-Design Bench completou integralmente apenas 26,4% de 273 tarefas retiradas de sessões reais de programação, embora atenda 69,9% dos requisitos em média.