Key points are not available for this paper at this time.
Resumo Os mais recentes módulos de linguagem de IA podem produzir ensaios de Física originais e de alta qualidade no formato curto (300 palavras) em questão de segundos. Essas tecnologias, como ChatGPT e davinci-003, estão disponíveis gratuitamente para qualquer pessoa com uma conexão à internet. Neste trabalho, apresentamos evidências de que ensaios gerados por IA alcançam notas de Primeira Classe em uma avaliação de redação de ensaios de um módulo de Física universitário acreditado e atual. A avaliação exige que os alunos respondam a cinco perguntas abertas com um ensaio curto de 300 palavras cada. Cinquenta respostas de IA foram geradas para criar dez submissões que foram marcadas independentemente por cinco avaliadores separados. As submissões geradas por IA obtiveram uma nota média de 71 ± 2 %, em forte acordo com a média atual do módulo de 71 ± 5 %. Uma submissão típica de IA, portanto, muito provavelmente seria classificada como Primeira Classe, a classificação mais alta disponível nas universidades do Reino Unido. O software de detecção de plágio retornou uma pontuação de plágio entre 2 ± 1 % (Grammarly) e 7 ± 2 % (TurnitIn). Argumentamos que esses resultados indicam que a atual IA de processamento de linguagem natural representa uma ameaça significativa à fidelidade dos ensaios em formato curto como um método de avaliação em cursos de Física.
Yeadon et al. (Ter,) estudaram esta questão.