Análise Artificial Lança Benchmarks de IA Específicos para Indústria; Claude Fable 5 Lidera, GLM-5.2 Desafia Modelos de Código Fechado

A Artificial Analysis lançou seis índices de desempenho específicos para setores, a fim de avaliar aplicações empresariais reais nas áreas de finanças, direito, saúde, operações, engenharia e economia, de acordo com monitoramento da Beating. Diferentemente dos benchmarks genéricos tradicionais, que se baseiam em conjuntos de dados acadêmicos, os novos índices utilizam ponderações personalizadas com base nas classificações de atividades de trabalho do O*NET para simular a distribuição real de tarefas em cada setor. Nos testes iniciais, o Claude Fable 5 liderou todos os oito índices, enquanto o GLM-5.2 de código aberto conquistou o primeiro lugar em cinco dos seis índices setoriais e obteve 53 no índice de engenharia, aproximando-se dos 55 do Claude Sonnet 5. Os índices revelam lacunas significativas de desempenho: no benchmark jurídico, o Gemini 3.1 Pro Preview igualou a precisão do Claude Fable 5 com diferença de até 11 pontos, ao mesmo tempo que rodou 7 vezes mais rápido.
Isenção de responsabilidade: as informações nesta página podem ter origem em fontes terceiras e servem apenas como referência. Não representam as opiniões da Gate e não constituem orientação financeira, de investimentos ou jurídica. A negociação de ativos virtuais envolve alto risco. Não tome decisões baseando-se apenas nas informações desta página. Para mais detalhes, consulte a Isenção de responsabilidade.
Comentário
0/400
Sem comentários