[Letrus] Como funciona a correção?
A Inteligência Artificial (IA) da Letrus avalia as competências de 1 a 5,resultando de 0 a 1000 pontos. A cada competência é atribuída uma nota
dentro dos níveis estabelecidos pelo ENEM (0, 40, 80, 120, 160 e 200) e um
comentário. O(a) professor(a) também pode deixar seu próprio comentário na
redação do estudante ou, caso ache necessário, alterar a nota dada pela IA.
Nossa inteligência artificial de atribuição de notas para o ENEM utiliza como
base algoritmos conhecidos como “Redes Neurais Artificiais”. Esses algoritmos
passam por uma fase de treinamento com redações previamente corrigidas
por humanos para entender qual o comportamento das diversas
características de um texto e como elas estão associadas a uma nota
específica. O treinamento ocorre de forma periódica e gera um modelo, que
tem um erro médio absoluto de 77 pontos na nota total do ENEM. Para que
possamos diminuir esse erro de forma contínua, é de extrema importância o
retorno que recebemos dos professores para entender em quais aspectos
podemos continuar melhorando. Ainda, é importante dizer que, no ENEM,
cada prova passa por dois corretores, porém caso haja uma diferença de mais
de 100 pontos em relação à nota total da prova ou de mais de 80 pontos em
relação a alguma das competências, o texto passa, então, por um terceiro
corretor. Assim, a Letrus está dentro da divergência aceita pela prova oficial.
A Inteligência Artificial (IA) também avalia a estrutura dos textos em uma
escala de 1 a 5. O nível 1 representa os textos que mais se distanciam da
estrutura esperada, e o 5 representa aqueles que mais se aproximam. Além
disso, há indicadores e metas, extraídos da análise de redações que atingiram
mil pontos no Enem, que norteiam a escrita do estudante. Importante dizer
que a devolutiva de estrutura é separada da devolutiva de competências!
Portanto, mesmo que um estudante vá muito bem na estrutura, isso não
garante uma boa nota nas competências, pois são correções distintas.
Temos comentários padronizados gerais para situações mais frequentes nos
textos, então, caso queira personalizar a devolutiva, o(a) professor(a) também
pode deixar seu próprio comentário na redação do aluno ou, caso ache
necessário, pode alterar a nota dada pela IA. Ao clicar em ver a redação do
estudante, aparecerá um caixa de correção com as notas de cada competência
e com comentários atribuídos pela Inteligência Artificial. Para alterá-los, basta
clicar na competência desejada e depois em “Editar”.
É importante reforçar que a divergência de até 80 pontos em uma
competência está dentro do aceitável pela prova oficial entre diferentes
avaliações. Além disso, atingir 200 em uma competência é difícil, visto que a IA
tem como referência que são pouquíssimas redações efetivamente nota 1000
no ENEM. Em 2021, por exemplo, segundo o site Brasil Escola, foram 22
redações nota 1000 dentre 2,1 milhões.
Por fim, vale compartilhar que, analisando os dados da prova oficial do ENEM
em 2020, também existe uma porcentagem considerável de redações que
receberam a mesma nota em todas as competências sem que isso configure
incoerência na devolutiva.
Para entender mais sobre a devolutiva da Letrus, assista esse vídeo.