O modelo de IA pode responder adequadamente a questões oftalmológicas

Grandes modelos de linguagem (LLMs), como o ChatGPT, podem responder a perguntas oftalmológicas escritas pelos pacientes e geralmente gerar respostas apropriadas, de acordo com um estudo publicado on-line em 22 de agosto em Rede JAMA aberta.

Isaac A. Bernstein, da Universidade de Stanford, na Califórnia, e colegas examinaram a qualidade dos conselhos oftalmológicos gerados por um chatbot LLM em comparação com os conselhos escritos por oftalmologistas. O estudo utilizou dados não identificados de um fórum médico online, no qual as perguntas dos pacientes recebiam respostas escritas por oftalmologistas. Um painel mascarado de oito oftalmologistas certificados foi solicitado a diferenciar entre as respostas geradas pelo chatbot ChatGPT e as respostas dos oftalmologistas.

Duzentos pares de perguntas e respostas dos usuários foram avaliados. Os pesquisadores descobriram que a precisão média foi de 61,3% para diferenciar inteligência artificial (IA) e respostas humanas. De 800 avaliações de respostas escritas por chatbot, 21,0 e 64,6 por cento foram marcadas como escritas por humanos e escritas por IA, respectivamente. As respostas do chatbot foram classificadas com mais frequência como prováveis ​​ou definitivamente escritas pela IA em comparação com as respostas humanas. A probabilidade de respostas do chatbot conterem material incorreto ou inapropriado e a probabilidade de danos foram comparáveis ​​às respostas humanas.

“Pretendemos que este estudo catalise um diálogo mais extenso e diferenciado e esforços conjuntos em torno do uso de LLMs em oftalmologia entre várias partes interessadas na área da saúde, incluindo pacientes, médicos, pesquisadores e formuladores de políticas”, escrevem os autores. “O objetivo principal é aproveitar com prudência essas descobertas iniciais de pesquisas para moldar a implementação responsável de LLMs no campo da oftalmologia”.

Direitos autorais © 2023 HealthDay. Todos os direitos reservados.