Preprint / Version 1

Generation of Personalized Educational Feedback by Generative AI: Validation of ChatGPT in the Context of Brazilian High School Education

Authors

DOI:

https://doi.org/10.5753/sol.2026.0003

Keywords:

Personalized Feedback, Generative AI, ChatGPT

Abstract

This work investigates the effectiveness of using Generative Artificial Intelligence, specifically ChatGPT, to generate feedback for Brazilian high school essays. Using the Essay-BR corpus, the study compared AI evaluations with human corrections, applying correlation and error metrics (MAE/RMSE), alongside a qualitative analysis based on the model's self-assessment. Quantitative results indicated a moderate correlation and a tendency for the AI to overestimate scores. On the other hand, the qualitative analysis showed that ChatGPT is capable of generating structurally coherent, polished, and motivating feedback. In conclusion, the tool, in its current stage, presents greater potential as an educational support instrument rather than as an independent evaluator.

Downloads

Download data is not yet available.

References

Adelina Moura, A. A. C. (2023). Literacia de prompts para potenciar o uso da inteligência artificial na educação. RE@ D-Revista de Educação a Distância e Elearning, 6(2):e202308–e202308. DOI: 10.34627/redvol6iss2e202308.

Costa Júnior, J. F., Moraes, L. S., de Souza, M. M. N., Lopes, L. C. L., Meneses, A. R., Pontes Pinto, A. R. d. A., dos Santos, L. S. R., and Zocolotto, A. (2023). A importância de um ambiente de aprendizagem positivo e eficaz para os alunos. Rebena - Revista Brasileira de Ensino e Aprendizagem, 6:324–341.

Cunto, C., Fernandes, A., Pinto, L., Ferreira, J., Souza, W., Rodrigues, S., Silva, W., and Angonese, A. (2022). O feedback personalizado por meio de software de avaliaÇÃo de atividades qualitativas. Anais do CIET:CIESUD:2022.

da Silva Neta, M. and Capuchinho, A. C. (2017). Educação híbrida: Conceitos, reflexões e possibilidades do ensino personalizado. In II Congresso sobre Tecnologias na Educação (Ctrl+E 2017), pages 148-156. CEUR Workshop Proceedings.

Di Santo, M. (2023). Inteligência artificial na educação: Rumo a uma aprendizagem personalizada. IOSR Journal of Humanities and Social Science, 28:19-25. DOI: 10.9790/0837-2805031925.

Giraffa, L. and Kohls-Santos, P. (2023). Inteligência artificial e educação: conceitos, aplicações e implicações no fazer docente. Educação em Análise, 8(1):116–134. DOI: 10.5433/1984-7939.2023v8n1p116.

Guerreiro, N. P., Nunes, E. d. F. P. d. A., González, A. D., and Mesas, A. E. (2016). Perfil sociodemogrÁfico, condiÇÕes e cargas de trabalho de professores da rede estadual de ensino de um municÍpio da regiÃo sul do brasil. Trabalho, Educação e Saúde, 14:197–217. DOI: 10.1590/1981-7746-sol00027.

Liu, Y., Iter, D., Xu, Y., Wang, S., Xu, R., and Zhu, C. (2023). G-eval: Nlg evaluation using gpt-4 with better human alignment. DOI: 10.48550/arXiv.2303.16634.

Marinho, J., Anchiêta, R., and Moura, R. (2021). Essay-br: a brazilian corpus of essays. In Anais do III Dataset Showcase Workshop, pages 53-64, Porto Alegre, RS, Brasil. SBC. DOI: 10.5753/dsw.2021.17414.

Picão, F., Gomes, L., Alves, L., Barpi, O., and Luccheti, T. (2023). InteligÊncia artificial e educaÇÃo: Como a ia estÁ mudando a maneira como aprendemos e ensinamos. Revista Amor Mundi, 4:197-201. DOI: 10.46550/amormundi.v4i5.254.

Pontual Falcão, T., Arêdes, V., de Souza, S. B. J., Fiorentino, G., Neto, J. R., Alves, G., and Mello, R. F. (2023). Tutoria: a software platform to improve feedback in education. Journal on Interactive Systems, 14(1):383–393. DOI: 10.5753/jis.2023.3247.

Silva, A. S. d., Alarcão, D. T. A., and Faria, S. P. (2025). A inteligÊncia artificial como facilitadora no ensino personalizado: Potencialidades e desafios no contexto educacional brasileiro. Revista Ibero-Americana de Humanidades, Ciências e Educação, 11(6):3474–3499. DOI: 10.51891/rease.v11i6.19991.

Zhu, Y., Zhang, L., Zong, R., and Sun, H. (2024). Exploring ai-generated feedback on english writing: A case study of chatgpt. US-China Foreign Language, 22(3):144-153. DOI: 10.17265/1539-8080/2024.03.002.

Posted

2026-02-20

How to Cite

OLIVEIRA DE MELO, Luiz Antônio; DA ROCHA FALCÃO, Taciana Pontual. Generation of Personalized Educational Feedback by Generative AI: Validation of ChatGPT in the Context of Brazilian High School Education. SOL PreprintsPorto Alegre, Brasil, 2026. DOI: 10.5753/sol.2026.0003. Disponível em: https://preprints-sol.sbc.org.br/sbc/preprint/view/3. Acesso em: 1 mar. 2026.

Data Availability Statement

Colab: https://colab.research.google.com/drive/1l_wehdGI6_knaBJsJu_dS4AAG3NLZYGU?usp=sharing

 

Drive: https://drive.google.com/drive/folders/1TJLcfzMROpE9mVnUgRv2jRyl3rS2SzVm?usp=sharing