Rendimiento y utilidad de ChatGPT-3.5 en la educación - Riopérez Matilla, Marta

Abstract

El presente trabajo pretende evaluar el rendimiento de ChatGPT-3.5 en las principales ramas educativas y evidenciar sus posibles limitaciones. El estudio viene motivado por la velocidad del avance de la inteligencia artificial y su impacto en el aprendizaje. Para el análisis, se examina la literatura disponible sobre el uso académico de ChatGPT-3.5 y, en base a ello, se realiza un estudio experimental cualitativo con la herramienta. Así, se observa que ChatGPT-3.5 tiene un gran potencial para la educación, pero aún presenta determinadas limitaciones que pueden ser perjudiciales en caso de falta de control. Dicha afirmación es coherente con la literatura estudiada, exceptuando algunas diferencias en términos de resolución de problemas cuantitativos. En el aprendizaje de lenguas extranjeras, su rendimiento es excelente. En materias de contenido alfabético resulta también útil, aunque presenta imprecisiones, incoherencias e incluso invenciones, especialmente en materia jurídica. La capacidad del programa es limitada en materias numéricas, por lo que se exige irremediablemente la supervisión del usuario. De todo ello se deduce la necesidad y la urgencia de visibilizar las áreas de mejora de ChatGPT-3.5 para hacer su utilización segura tanto a efectos técnicos como éticos. Adicionalmente, deben implementarse normas técnicas que optimicen su integración en los planes educativos. La principal conclusión del trabajo es que ChatGPT-3.5 es de gran utilidad en la aportación de ideas y como guía de las tareas académicas, pero no puede ni debe sustituir el trabajo y el conocimiento de los estudiantes.

This study aims to evaluate ChatGPT-3.5’s performance in the main educational branches and to highlight its potential limitations. The study is motivated by the artificial intelligence’s fast development and its impact on learning. For this analysis, available literature on the academic use of ChatGPT-3.5 is examined and a qualitative experimental study with the tool is carried out based on the previous results. In this way, ChatGPT-3.5 has proved to have great potential for education, but also has various limitations that could be detrimental if not controlled. This statement is consistent with the literature that has been studied, except for some differences in terms of quantitative problem solving. In foreign language learning, its performance is excellent. In alphabetic content subjects, it is also useful, although it provides inaccuracies, inconsistencies and even inventions, especially when it comes to Law studies. The program's capacity is limited in numerical subjects and thus, the user’s supervision is inevitably required. Hence, it is necessary and urgent to make ChatGPT-3.5’s weaknesses visible to make its use safe in both technical and ethical perspectives. Additionally, technical standards should be implemented to optimize its integration into educational plans. The main conclusion of this work is that ChatGPT-3.5 is very useful in providing ideas and as a guide for academic assignments, but it cannot and should not replace students’ work and knowledge.