O ChatGPT escreve longos textos, mas não se garante na matemática avançada

O ensino da matemática avançada apresenta desafios tanto para os alunos quanto para os professores. É por isso que muitos educadores estão recorrendo ao ChatGPT em busca de auxílio.

De acordo com um recente artigo da Forbes, 51% dos professores entrevistados admitiram ter utilizado o ChatGPT como uma ferramenta de apoio ao ensino, com 10% deles fazendo uso diário da plataforma.

Esta Inteligência Artificial pode facilitar a transmissão de informações técnicas de maneira mais acessível, embora nem sempre seja capaz de fornecer soluções corretas, especialmente em matemática de nível avançado.

Um time de pesquisadores internacionais realizou testes para avaliar as habilidades do software, fornecendo ao programa de IA gerativa perguntas desafiadoras de matemática em nível de pós-graduação.

Apesar de demonstrar certa dificuldade na maioria dos cálculos, as respostas certas podem sobrepor a tamanha dificuldade. As respostas corretas indicaram que ele pode ser uma ferramenta útil para pesquisadores e professores de matemática, funcionando como um mecanismo de busca especializado.

ChatGPT pode ser eficiente na matemática, embora cometa deslizes

O surgimento do ChatGPT gerou opiniões divergentes sobre a tecnologia, com avaliações extremas sendo comuns. Alguns veem a IA como altamente eficiente, enquanto outros a consideram inadequada para uso. Frieder Simon, um candidato a PhD na Universidade de Oxford e autor principal do estudo, observou que a ênfase tem sido colocada nos extremos.

Por exemplo, o ChatGPT demonstrou um desempenho notável no teste de inteligência linguística do Psychology Today, mas obteve um resultado decepcionante no exame de CPA da Accounting Today.

Simon explicou que existem casos intermediários, nos quais o ChatGPT se mostra eficaz para alguns estudantes e educadores, enquanto, para outros, nem tanto.

Quando se trata de testes de matemática do ensino médio e graduação, o ChatGPT demonstra um desempenho satisfatório, posicionando-se no percentil 89 no teste. Surpreendentemente, também recebeu uma nota B no exame final de computação quântica elaborado pelo especialista em tecnologia Scott Aaronson.

É importante ressaltar que a avaliação das capacidades do ChatGPT pode exigir diferentes tipos de testes. Leah Henrickson, professora de mídia digital na Universidade de Queensland, destaca que a mídia tende a destacar a capacidade do ChatGPT em passar em testes padronizados populares.

Para isso, é preciso considerar que esses testes frequentemente se concentram na memorização de fatos, não necessariamente refletindo a inteligência em si. O ChatGPT pode obter sucesso nesses testes devido à capacidade de recordar informações adquiridas durante o treinamento.