IA substitui humanos na correção de provas no Texas

Sistema pode proporcionar uma economia de 15 a 20 milhões de dólares por ano na contratação de avaliadores temporários

Um novo sistema de pontuação baseado em inteligência artificial (IA) está sendo testado em escolas do Texas, Estados Unidos.

Descrito pelo Texas Tribune como um “mecanismo de pontuação automatizado”, a tecnologia conta com processamento de linguagem natural e substituirá a maioria dos avaliadores humanos na região.

Entenda:

• Um sistema de pontuação baseado em IA está sendo testados em escolas do Texas para substituir avaliadores humanos na correção de questões abertas;
• A expectativa é de que o sistema ajude a economizar entre 15 e 20 milhões de dólares por ano na contratação de avaliadores temporários;
• A tecnologia conta com processamento de linguagem natural e foi treinada com base em 3 mil respostas de exames previamente avaliados por humanos;
• Um quarto de todas as correções feitas por computador ainda serão revisadas por humanos – além de respostas com gírias ou que não estejam em inglês e possam confundir o sistema.

O sistema foi implementado pela Texas Education Agency (TEA) para avaliar questões abertas, e a expectativa é de que ele ajude a economizar entre 15 e 20 milhões de dólares por ano com a redução da necessidade de contratar avaliadores humanos temporários para a correção das provas.

Educadores encontraram inconsistências na correção com IA

Conforme divulgado pela TEA, o sistema foi treinado com base em 3 mil respostas de exames previamente avaliados por humanos.

Apesar da tecnologia, um quarto de todos os resultados corrigidos por computador ainda serão revisados por humanos – além de respostas que incluem gírias ou que não estejam em inglês e possam confundir o sistema.

Mas nem todos os educadores estão seguros sobre a eficácia do sistema.

Em entrevista ao Texas Tribune, Lori Rapp, superintendente do Distrito Escolar Independente de Lewisville, explicou que o distrito detectou um “aumento drástico” em questões abertas avaliadas em zero depois que a IA foi usada no fim do ano passado.

“Não podemos determinar se há algo errado com a pergunta do teste ou se é o novo sistema de pontuação automatizado.”

A TEA reforça que o mecanismo de pontuação é um sistema fechado e bem diferente da IA, que é, como descreveu a agência, “um computador que usa algoritmos de aprendizagem progressivos para se adaptar, permitindo que os dados façam a programação e, essencialmente, ensinem a si mesmos”.