Um novo sistema de pontuação baseado em inteligência artificial (IA) está sendo testado em escolas do Texas, Estados Unidos. Descrito pelo Texas Tribune como um “mecanismo de pontuação automatizado”, a tecnologia conta com processamento de linguagem natural e substituirá a maioria dos avaliadores humanos na região.
Entenda:
- Um sistema de pontuação baseado em IA está sendo testados em escolas do Texas para substituir avaliadores humanos na correção de questões abertas;
- A expectativa é de que o sistema ajude a economizar entre 15 e 20 milhões de dólares por ano na contratação de avaliadores temporários;
- A tecnologia conta com processamento de linguagem natural e foi treinada com base em 3 mil respostas de exames previamente avaliados por humanos;
- Um quarto de todas as correções feitas por computador ainda serão revisadas por humanos – além de respostas com gírias ou que não estejam em inglês e possam confundir o sistema.
O sistema foi implementado pela Texas Education Agency (TEA) para avaliar questões abertas, e a expectativa é de que ele ajude a economizar entre 15 e 20 milhões de dólares por ano com a redução da necessidade de contratar avaliadores humanos temporários para a correção das provas.
Leia mais:
- Novo sistema de IA analisa precisão de apps de exames médicos
- Ingresso da IA generativa na saúde gera controvérsias
- Acordo entre Hollywood e gravadoras estabelece proteção contra IA na música
Educadores encontraram inconsistências na correção com IA
Conforme divulgado pela TEA, o sistema foi treinado com base em 3 mil respostas de exames previamente avaliados por humanos. Apesar da tecnologia, um quarto de todos os resultados corrigidos por computador ainda serão revisados por humanos – além de respostas que incluem gírias ou que não estejam em inglês e possam confundir o sistema.
Mas nem todos os educadores estão seguros sobre a eficácia do sistema. Em entrevista ao Texas Tribune, Lori Rapp, superintendente do Distrito Escolar Independente de Lewisville, explicou que o distrito detectou um “aumento drástico” em questões abertas avaliadas em zero depois que a IA foi usada no fim do ano passado. “Não podemos determinar se há algo errado com a pergunta do teste ou se é o novo sistema de pontuação automatizado.”
A TEA reforça que o mecanismo de pontuação é um sistema fechado e bem diferente da IA, que é, como descreveu a agência, “um computador que usa algoritmos de aprendizagem progressivos para se adaptar, permitindo que os dados façam a programação e, essencialmente, ensinem a si mesmos”.