Condence, Calibration, and Abstention in Small Open-Weight Language Models on Psychiatric Knowledge Questions: A Cross-Domain Replication
Este estudo piloto demonstra que modelos de linguagem pequenos e de pesos abertos aplicados a questões de conhecimento psiquiátrico exibem uma calibração de confiança deficiente, classificações de precisão dependentes do domínio e que instruí-los a abster-se de responder frequentemente degrada em vez de melhorar o desempenho quando avaliados com estatísticas pareadas rigorosas.
Artigo original sob licença CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). Esta é uma explicação gerada por IA do artigo abaixo. Não foi escrita nem endossada pelos autores. Para precisão técnica, consulte o artigo original. Ler aviso legal completo
Afogado em artigos na sua área?
Receba digests diários dos artigos mais recentes que correspondam às suas palavras-chave de pesquisa — com resumos técnicos, no seu idioma.