Objetivo: Avaliar a qualidade dos resumos escritos por estudantes do 3º ao 12º ano. O objetivo é avaliar o quão bem um estudante capta a ideia principal, detalhes relevantes de um texto-fonte e a clareza, precisão e fluência da linguagem utilizada no resumo. Este modelo ajudará professores a avaliar o trabalho dos estudantes e também oferecer feedback imediato aos alunos em plataformas de aprendizado.
Escrever resumos é vital para alunos de todas as idades. Ele melhora a compreensão da leitura, é especialmente benéfico para alunos que estão aprendendo um segundo idioma e estudantes com dificuldades de aprendizado, fomenta o pensamento crítico e é uma poderosa ferramenta para aprimorar as habilidades de escrita. As atuais tecnologias, como grandes modelos de linguagem, oferecem soluções potenciais para avaliação rápida, mas existem desafios quando se trata de avaliar resumos escritos por estudantes.
A motivação para participar dessa competição foi concretizada através da ideia apresentada na publicação no LinkedIn.
Organizadores:
- CommonLit: Uma organização educacional sem fins lucrativos.
- Learning Agency Lab
- Vanderbilt University
- Georgia State University
As submissões são avaliadas usando MCRMSE (erro quadrático médio da raiz da coluna média).
Cada student_id no conjunto de testes deve ter um valor previsto para as duas medidas analíticas.
- E muitos outros!
O resultado obtido por meu modelo foi de 0.656.
Para detalhes completos, visite: link para competição no Kaggle