O estudo constata que o uso do LLM leva a ‘provavelmente diminuir’ nas habilidades de aprendizagem

Cientistas do Instituto de Tecnologia de Massachusetts determinaram que o uso de grandes modelos de idiomas leva a uma “diminuição provável” nas habilidades de aprendizagem.

Tempo relatado As descobertas da equipe de pesquisa nesta semana. Em um papel de pré -impressãoos cientistas detalharam que os novos dados são frutos de um estudo de meses.

A equipe do MIT pediu a 54 indivíduos da área de Boston para escrever um pequeno ensaio em 20 minutos. Os participantes foram divididos em três grupos. O primeiro grupo escreveu o ensaio sem assistência externa, o segundo teve acesso aos mecanismos de pesquisa e o terceiro usou o ChatGPT.

Os pesquisadores repetiram o exercício quatro vezes. Na quarta ocasião, os participantes que tiveram acesso ao chatgpt mudaram de funções com aqueles que escreveram os ensaios por conta própria. O quarto teste foi realizado quatro meses após o primeiro.

“Embora os benefícios fossem inicialmente aparentes, como demonstramos ao longo de 4 meses, os participantes do grupo LLM tiveram um desempenho pior do que seus colegas no grupo somente cerebral em todos os níveis: NEURAL, LINGUÁRIO, Pontuação ”, escreveram os pesquisadores no artigo.

A equipe do MIT coletou dados dos testes com a ajuda da eletroencefalografia, ou EEG, fones de ouvido usados ​​pelos participantes. Esses dispositivos usam eletrodos para medir a atividade cerebral do usuário. Os pesquisadores também fizeram um conjunto de perguntas aos participantes, a fim de completar os dados coletados pelos fones de ouvido.

Os dispositivos de ovos usam uma métrica chamada DDTF ou função de transferência direcionada dinâmica, conectividade para medir a carga cognitiva do usuário. Essa métrica descreve a intensidade com a qual diferentes regiões do cérebro interagem entre si. Segundo os pesquisadores, os participantes que usaram LLMs exibiram até 55% de conectividade DDTF mais baixa enquanto escrevem ensaios do que os que não tiveram acesso ao ChatGPT.

O grupo equipado com LLM também exibiu uma atividade teta da linha frontal-média inferior durante o exercício de escrita. As ondas cerebrais teta da linha frontal estão associadas a atividades cognitivas que envolvem atenção focada. “As conexões teta que eram proeminentes no grupo somente no cérebro eram relativamente fracas ou Ausente no grupo LLM ”, descobriram os pesquisadores.

Em uma fase subsequente do projeto, a equipe do MIT pediu aos participantes do estudo que citassem seus ensaios. O grupo que usou LLMs não executou a tarefa, assim como os outros dois. Além disso, os participantes desse grupo relataram menor “propriedade percebida” dos ensaios que produziram.

“Demonstramos a questão premente de uma provável diminuição nas habilidades de aprendizagem com base nos resultados de nosso estudo”, escreveram os pesquisadores. “Essas descobertas apóiam um modelo educacional que atrasa a integração de IA até que os alunos se envolvam em um esforço cognitivo autodidata suficiente. Essa abordagem pode promover a eficácia imediata da ferramenta e a autonomia cognitiva duradoura”.

Foto: Focal Foto/Flickr