Conselhos de Triagem de Modelos de Linguagem Geral em Saúde e Situações Todos os Dias

O que aconteceu

One adult in 10 has consulted a chatbot for health information within 6 months, and nearly half of users do so to decide whether they need care. Referral regardless of need could add demand on stretched services. To compare referral to a professional by general-purpose language models in health and non-health situations against the level of contact that human raters judged necessary. Cross-sectional study of 4,346 responses generated in September 2026 by 53 general-purpose model configurations, released between March 2023 and September 2026 and accessed through APIs or run locally, to 82 investigator-written messages (41 health and 41 non-health). No patients were involved. Health vs non-health scenario.

Trecho mantido em inglês: a tradução automática não passou na conferência de números.

O que encontraram

Referência profissional, incondicional ou condicionada a uma mudança futura ou à dúvida, codificada por 3 modelos de linguagem e comparada com o nível de contato que médicos, farmacêuticos e 2 avaliadores tecnicamente treinados julgaram necessário. O encaminhamento ocorreu em 74,7% das respostas à saúde e 46,3% das não-saúde, mais frequentemente para saúde em todas as configurações (diferença padronizada, 28,3 pontos percentuais; IC 95%, 18,3-37,0). Nos casos em que os avaliadores julgaram o contato desnecessário, 64,5% da saúde vs 27,6% das respostas não-saúde recomendaram um profissional (razão de chances, 17,08; IC 95%, 6,14-47,54); a maioria do excesso de saúde foi encaminhamento condicional (46,3% vs 21,0%), e o encaminhamento incondicional foi 18,1% vs 6,6% (razão de chances, 4,66; IC 95%, 1,43-15,19). Quando uma avaliação presencial foi julgada necessária, o encaminhamento foi semelhante (89,6% vs 84,5%). Nos medicamentos e na saúde física, o encaminhamento não foi associado à gravidade nominal (razão de odds por ponto, 1,16; IC 95%, 0,53-2,55), diferentemente da saúde externa (3,86; IC 95%, 1,79-8,33). O gap de referência foi de 20,5 pontos percentuais entre as configurações liberadas em 2023 e 32,2 e 32,3 em 2025 e 2026 (4,8 pontos percentuais por ano; IC 95%, 2,3-7,2).

Por que isso importa

Modelos de linguagem de uso geral encaminhavam pessoas para um profissional onde era necessária uma visita, na saúde como fora dela, mas na saúde também em 2 em 3 situações que médicos e farmacêuticos julgavam manejáveis sem contato, um padrão mais forte em modelos mais novos. As avaliações destes sistemas deverão incluir a possibilidade de os seus pareceres distinguirem situações que possam ser diferidas ou geridas à distância, juntamente com o encaminhamento de casos graves.