This research presents how the adoption of self-regulation strategies using peer feedback and chatbots promotes the transformation of online assessment. The evaluation of the design of a learning activity that integrates a peer feedback intervention to suggest improvements in academic essay writing is described. Based on a design-based research approach, three main phases are established, a first one for the design of the proposal and two consecutive implementations. In the first, a satisfaction questionnaire was distributed to 348 students and the analysis of the responses was used to redesign the proposal. In the second implementation, a questionnaire was used with 24 students and a group interview with the faculty. The results allowed a positive assessment of the relationship between peer feedback and the development of self-regulation and learning to learn competencies. Finally, it is concluded that it is necessary to propose more often strategies of this type that also include the use of AI, thus giving more opportunities to students in the development of their autonomy and a conscious and efficient management of their learning process, so this article also presents a design proposal for a new iteration with AI. Esta investigación presenta cómo a partir de la adopción de estrategias de autorregulación utilizando el feedback entre pares y los chatbots se promueve la transformación de la evaluación en línea. Se describe la evaluación del diseño de una actividad de aprendizaje que integra una intervención de feedback entre pares para sugerir mejoras en la elaboración de ensayos académicos. A partir de un enfoque de investigación basado en el diseño se establecen tres fases principales, una primera de diseño de la propuesta y dos implementaciones consecutivas. En la primera se distribuyó un cuestionario de satisfacción a 348 estudiantes y el análisis de las respuestas se utilizó para el rediseño de la propuesta. En la segunda implementación, se utilizó un cuestionario con 24 estudiantes y una entrevista grupal al profesorado. Los resultados permitieron valorar positivamente la relación entre el feedback por pares, y el desarrollo de las competencias de autorregulación y de aprender a aprender. Finalmente, se concluye que es necesario proponer más a menudo estrategias de este tipo y que incluyan además el uso de la IA, dando así más oportunidades al estudiantado en el desarrollo de su autonomía y una gestión consciente y eficiente de su proceso aprendizaje, por lo que en este artículo se presenta también una propuesta de diseño para una nueva iteración con IA.

Chatbots can have a significant positive impact on learning. There is a growing interest in their application in teaching and learning. The self-regulation of learning is fundamental for the development of lifelong learning skills, and for this reason, education should contribute to its development. In this sense, the potential of chatbot technologies for supporting students to self-regulate their learning activity has already been pointed out. The objective of this work is to explore university students’ interactions with EDUguia chatbot to understand whether there are patterns of use linked to phases of self-regulated learning and academic task completion. This study presents an analysis of conversation pathways with a chatbot tutor to enhance self-regulation skills in higher education. Some relevant findings on the length, duration, and endpoints of the conversations are shared. In addition, patterns in these pathways and users’ interactions with the tool are analysed. Some findings are relevant to the analysis of the link between design and user experience, but they can also be related to implementation decisions. The findings presented could contribute to the work of other educators, designers, and developers interested in developing a tool addressing this goal.