Pesquisadores da Universidade de Reading conduziram pesquisas interessantes enviando respostas escritas por IA em exames. Os resultados foram surpreendentemente melhores do que os dos estudantes humanos, e os professores não conseguiram diferenciar as respostas da IA ​​das respostas humanas.

Os pesquisadores criaram 33 identidades de estudantes falsas para enviar respostas não editadas geradas por IA. As respostas foram geradas com o auxílio do ChatGPT-4 para avaliações online de alunos de graduação em provas de psicologia. Os pesquisadores enviaram respostas de IA para 63 questões em formato resumido e dissertativo, enquanto os professores que corrigiam os trabalhos não foram informados sobre a pesquisa.

Institutos não voltarão a fazer exames manuscritos

Os professores universitários desinformados identificaram apenas uma das 33 submissões de exames como escrita por IA. Ao mesmo tempo, as outras 32 inscrições não foram detectadas e receberam notas mais altas do que os alunos reais. Em números reais, 83% dos envios escritos por IA receberam mais notas do que estudantes humanos.

Leia também: Aplicativos educacionais chineses de IA ganham mercado nos Estados Unidos

A pesquisa foi liderada pelo Professor Etienne Roesch e pelo Professor Associado Peter Scarfe. Scarfe disse que a sua investigação mostra que é de importância internacional para a integridade das avaliações académicas e como a IA as irá afectar. Ele disse,

“Não iremos necessariamente voltar totalmente aos exames manuscritos – mas o setor da educação global terá de evoluir face à IA.”

Scarfe mencionou que a maioria das instituições abandonou os procedimentos tradicionais para garantir avaliações mais equitativas. Ambos os professores destacaram que os resultados de suas pesquisas são um “alerta para os educadores”.

Os ensaios de IA têm uma baixa taxa de detecção

Os pesquisadores revelaram que os ensaios de IA eram quase indetectáveis, já que 94% deles não levantaram preocupações aos verificadores. O Journal Plos One, que publicou o estudo, disse que a taxa de detecção mais baixa provavelmente será uma superestimativa. Ele disse,

 “Isso é particularmente preocupante, pois os envios de IA obtiveram notas mais altas do que os envios de alunos reais”,

A revista também observou que os alunos podem trapacear usando IA e escapar impunes. Eles também podem obter notas mais altas do que os honestos que não usaram IA. Para o estudo, as respostas geradas por IA foram enviadas para os módulos do primeiro ao terceiro ano por meio de identidades falsas. A IA superou os alunos humanos no primeiro e no segundo módulos.

No entanto, os humanos tiveram melhores resultados nos exames do terceiro ano. Os investigadores disseram que isto é consistente com a crença de que a IA não é boa em “raciocínio abstrato”, pelo menos no seu estado atual.

A IA ainda não tem a capacidade de raciocinar

O estudo também observou que a capacidade de raciocínio da IA ​​aumentará com o tempo e a sua detectabilidade diminuirá. Isso tornará mais difícil manter a integridade acadêmica. Os pesquisadores disseram que o estudo pode acabar com exames feitos em casa ou sem supervisão. 

O professor Roesch disse que o setor educacional precisa concordar sobre como os alunos podem usar a IA em seu trabalho. Ele insistiu que o mesmo se aplica ao uso da IA ​​em outras áreas para manter a confiança em toda a sociedade. 

Leia também: Soluções tecnológicas surgem para enfrentar o precipício de matrículas no ensino superior

A pró-vice-reitora de Educação de Reading, professora Elizabeth McCrum, disse que a universidade está limitando os exames feitos em casa. Ele disse que a universidade está trabalhando no desenvolvimento de outras formas que exigiriam a aplicação do conhecimento em situações da vida real, “muitas vezes cenários relacionados ao local de trabalho”. 

McCrum esclareceu que os alunos poderão usar IA em algumas avaliações para que saibam como usá-la de forma ética. Contudo, outras atribuições não exigirão o uso de ferramentas de inteligência artificial. O professor disse que isso ajudará a aumentar a alfabetização dos alunos em IA e a prepará-los para os requisitos modernos do local de trabalho. 

Reportagem criptopolitana de Aamir Sheikh