
Artigo de conferência: FeedType analisa a adaptação do feedback de IA ao longo da revisão de textos
Norah Almousa, Shayan Peyghambari Oskoui, Raquel Coelho, Gayle Rogers, Xiang Lorraine Li, Diane Litman
Proceedings of the Artificial Intelligence in Measurement and Education Conference (AIME-Con): Full Papers
Resumo de 500 palavras

Norah Almousa e colegas publicaram o FeedType nas atas da AIME-Con, realizada de 5 a 7 de outubro de 2026. O conjunto reúne 1.966 parágrafos de três unidades curriculares universitárias de escrita e compara feedback docente e de seis modelos de linguagem com três estratégias de formulação de instruções. Sete categorias descrevem o foco do feedback. As anotações automáticas foram confrontadas com avaliações humanas. Os modelos cobriram a maioria das categorias, mas nenhum reproduziu integralmente os padrões de adaptação dos docentes. As análises das versões dos textos e do desempenho limitaram-se à unidade de escrita designada composition. O estudo analisa o feedback, sem testar efeitos de uma intervenção na aprendizagem.
Sua contribuição é uma forma de perguntar sobre o foco de um comentário e se esse foco muda de forma adequada. Um sistema pode solicitar repetidamente uma elaboração, mesmo quando outra resposta seria mais útil. A correspondência da distribuição de categorias de um professor não provaria, por si só, que cada comentário é preciso ou útil. Os cursos do benchmark, as opções de anotação e as versões dos modelos testados também restringem o quão longe os resultados podem ir além da configuração relatada.
Para a AIEDHK, considere uma proposta de workshop de redação construída em torno de dois rascunhos do mesmo parágrafo. Antes de ler qualquer feedback gerado, o professor identificaria o próximo passo mais importante para aquela fase da tarefa. Os alunos poderiam então comparar sugestões, localizar as evidências textuais abordadas por cada uma e explicar qual questão merece atenção primeiro. Esta é uma proposta de ensino editorial, e não uma atividade avaliada pelo estudo de referência.
Por exemplo, um rascunho inicial sobre uma questão ambiental local pode necessitar de uma afirmação mais clara apoiada por uma fonte apropriada. Um rascunho posterior já poderia fazer essa conexão e, em vez disso, necessitaria de uma explicação precisa de uma qualificação. Pedir mais detalhes em ambos os casos significaria ignorar as diferentes prioridades de revisão. Os alunos poderiam explicar por que um comentário aparentemente útil iria desviar a atenção da tarefa atual, dando ao professor evidências do seu julgamento sobre a escrita.
Um piloto local poderia reter o rascunho, o comentário sugerido, a ação selecionada pelo aluno e uma breve razão para essa escolha. Os professores poderiam inspecionar uma pequena amostra de acordos e desacordos, em vez de presumir que aceitar mais sugestões indica melhor aprendizagem. Os revisores também devem examinar os comentários que identificam a categoria correta, mas propõem uma alteração inadequada. O objetivo seria entender como o feedback apoia uma decisão em um determinado momento do processo de escrita.
Uma aula de redação bilíngue poderia examinar se um comentário preserva o significado pretendido pelo escritor em todos os idiomas. Os alunos podem defender uma revisão usando o propósito da tarefa, enquanto o professor considera se o polimento linguístico distrai um argumento não resolvido ou uma afirmação não fundamentada.
Para as equipas de produto, o estudo sugere uma questão de avaliação que pode ser concretizada antes da implantação: o feedback responde à tarefa, ao rascunho atual e à dificuldade demonstrada pelo aluno? Essa questão pode orientar um conjunto de revisões limitadas sem transformar o comportamento anterior do professor num padrão inquestionável. A escrita posterior, concluída com menos assistência, poderia fornecer evidências complementares de aprendizagem. FeedType fornece um recurso de pesquisa útil para examinar o feedback adaptativo; uma decisão de adoção em sala de aula ou institucional ainda precisa de evidências sobre a qualidade e as consequências dos comentários que os alunos realmente recebem.


