Um estudo recente publicado na revista PLOS Digital Health avaliou o desempenho de ChatGPT no Exame de Licenças Médicas dos Estados Unidos (USMLE). Esse exame é composto por três testes altamente regulamentados e padronizados que avaliam o conhecimento em uma ampla gama de disciplinas médicas e é um requisito para obter uma licença médica no país.
ChatGPT é um recurso popular que usa a tecnologia de Inteligência Artificial (IA) para gerar textos semelhantes às respostas de um ser humano por meio da previsão de sequências de palavras. Ao contrário da maioria dos chatbots, ChatGPT não tem acesso à Internet e gera suas respostas com base nas relações entre palavras previamente aprendidas.
Os autores avaliaram ChatGPT em 350 das 376 perguntas públicas disponíveis no Exame de Licenças Médicas, obtendo uma pontuação de entre 52,4% e 75,0% nos três exames USMLE. Esse resultado superou o limite de aprovação, que é de aproximadamente 60%. Além disso, ChatGPT produziu pelo menos uma ideia significativa em 88,9% de suas respostas e uma concordância de 94,6% nas respostas geradas.
Os pesquisadores destacaram que, embora o tamanho da entrada tenha sido limitado, esses resultados sugerem que ChatGPT tem grande potencial para melhorar a educação médica e, consequentemente, a prática clínica. Os médicos de AnsibleHealth, plataforma de telemedicina envolvida no estudo, já estão utilizando ChatGPT para simplificar relatórios clínicos e melhorar a compreensão dos pacientes.
A IA tem sido cada vez mais aplicada em diversas áreas, e os resultados desse estudo mostram o potencial da tecnologia no campo da medicina. ChatGPT demonstrou ser capaz de obter resultados notáveis no Exame de Licenças Médicas, sem qualquer tipo de reforço humano. Isso é um marco importante na evolução clínica da IA e pode abrir caminho para novas possibilidades de aprendizado e prática médica mais eficientes e acessíveis.
