Artigo

LLM como juiz de textos clínicos em alemão não substitui especialistas

Auditoria de seis modelos abertos contra juízes especialistas em quatro conjuntos de dados clínicos alemães, incluindo resumos, sumários de alta e cartas ao paciente. Nenhuma configuração foi confiável entre paradigmas; trocar o painel de especialistas pelo LLM mudou 57,2% das categorias pontuais, inverteu 41,7% dos vencedores em pares e deixou passar 10,2% dos erros clínicos. Importa porque mostra que o uso de LLM como avaliador em contexto clínico exige análise de impacto na decisão.

Artigo

LLM como juiz de textos clínicos em alemão não substitui especialistas

Auditoria de seis modelos abertos contra juízes especialistas em quatro conjuntos de dados clínicos alemães, incluindo resumos, sumários de alta e cartas ao paciente. Nenhuma configuração foi confiável entre paradigmas; trocar o painel de especialistas pelo LLM mudou 57,2% das categorias pontuais, inverteu 41,7% dos vencedores em pares e deixou passar 10,2% dos erros clínicos. Importa porque mostra que o uso de LLM como avaliador em contexto clínico exige análise de impacto na decisão.