Desempenho de modelos de linguagem generativa em responder perguntas do exame de certificação da Sociedade Brasileira de Retina e Vitreoso.

Key Points

• Avaliar o desempenho de diversos modelos de linguagem generativa em responder perguntas de exame de certificação para especialistas em retina.
• Avaliação de Claude 3.5 Sonnet, ChatGPT-4 e ChatGPT-4o em perguntas de exame de certificação da Sociedade Brasileira de Retina e Vitreoso.
• Comparou métricas de desempenho dos modelos no contexto da educação médica.
• Claude 3.5 Sonnet e ChatGPT-4o superaram significativamente o ChatGPT-4.
• Funcionalidades aprimoradas dos modelos superiores indicam sua eficácia para o estudo de exames de certificação.