EVALUACIÓN DE LA VIABILIDAD DEL USO DE IA GENERATIVA PARA LA ENSEÑANZA DE MATEMÁTICAS DISCRETAS
DOI:
https://doi.org/10.63136/read1720251119pp992-1000Resumen
Ante los avances recientes en los modelos de lenguaje de gran tamaño (LLMs), las instituciones educativas han mostrado un creciente interés en su integración dentro de las actividades académicas. Sin embargo, el uso de herramientas de Inteligencia Artificial Generativa (IAG) en la educación presenta tanto oportunidades como desafíos. En este trabajo, se realiza una evaluación cuantitativa sobre la viabilidad de incorporar IAG en la enseñanza de la asignatura Matemáticas Discretas dentro de la licenciatura en Ingeniería en Computación. Para ello, se llevó a cabo una comparación del desempeño de ChatGPT 3.5, Gemini 1.5 y estudiantes de la licenciatura en la resolución de ejercicios sobre Teoría de Conjuntos. La selección de ejercicios fue categorizada según las habilidades requeridas para su resolución y el tipo de respuesta esperada. Los resultados revelan diferencias significativas entre el desempeño de los estudiantes y los LLMs, dependiendo de la categoría del ejercicio, y evidencian que existen preguntas que los modelos aún no pueden responder con precisión. Esto sugiere que su incorporación en el aula podría conllevar riesgos de imprecisión que deben ser considerados.Citas
Barektain, M., Nawalgaria, A., Mankowitz, D. J., Al Merey, M., Leviathan, Y., Mascaro, M., Kalman, M., Buchatskaya, E., Severyn, A., & Gulli, A. (2024). Foundational large language models & text generation [White paper]. https://www.kaggle.com/whitepaper-foundational-llm-and-text-generation
Dao, X. Q., & Le, N. B. (2023). Investigating the effectiveness of chatgpt in mathematical reasoning and problem solving: Evidence from the vietnamese national high school graduation examination. arXiv preprint arXiv:2306.06331. https://arxiv.org/abs/2306.06331
Frieder, S., Pinchetti, L., Griffiths, R. R., Salvatori, T., Lukasiewicz, T., Petersen, P., & Berner, J. (2024). Mathematical capabilities of chatgpt. Advances in neural information processing systems, 36. https://proceedings.neurips.cc/paper_files/paper/2023/hash/58168e8a92994655d6da3939e7cc0918-Abstract-Datasets_and_Benchmarks.html
Haiqiong, L., & Hoiio, K. (2024, July). ChatGPT Plagiarism in the Academic Field: Exploration and Analysis of Plagiarism Effects. In Machine Learning and Intelligent Computing (pp. 177-187). PMLR. https://proceedings.mlr.press/v245/haiqiong24a
Holmes, W., & Miao, F. (2023). Guidance for generative AI in education and research. UNESCO Publishing. https://www.unesco.org/en/articles/guidance-generative-ai-education-and-research
Huang, L., Yu, W., Ma, W., Zhong, W., Feng, Z., Wang, H., Chen, Q., Peng, W., Feng, X., Qin, B. & Liu, T. (2024). A survey on hallucination in large language models: Principles, taxonomy, challenges, and open questions. ACM Transactions on Information Systems. https://dl.acm.org/doi/abs/10.1145/3703155
Kasneci, E., Sessler, K., Küchemann, S., Bannert, M., Dementieva, D., Fischer, F., Gasser, U., Groh, G., Günnemann, S., Hüllermeier, E., Krusche, S., Kutyniok, G., Michaeli, T., Nerdel, C., Pfeffer, J., Poquet, O., Sailer, M., Schmidt, A., Seidel, T., Stadler, M., Weller, J., Kuhn, J. & Kasneci, G. (2023). ChatGPT for good? On opportunities and challenges of large language models for education. Learning and individual differences, 103, 102274. https://www.sciencedirect.com/science/article/abs/pii/S1041608023000195
Kumar, P. (2024). Large language models (LLMs): survey, technical frameworks, and future challenges. Artificial Intelligence Review, 57(10), 260. https://link.springer.com/article/10.1007/s10462-024-10888-y
Montenegro-Rueda, M., Fernández-Cerero, J., Fernández-Batanero, J. M., & López-Meneses, E. (2023). Impact of the implementation of ChatGPT in education: A systematic review. Computers, 12(8), 153. https://www.mdpi.com/2073-431X/12/8/153
Plevris, V., Papazafeiropoulos, G., & Jiménez Rios, A. (2023). Chatbots put to the test in math and logic problems: a comparison and assessment of ChatGPT-3.5, ChatGPT-4, and Google bard. AI, 4(4), 949-969. https://www.mdpi.com/2673-2688/4/4/48
Wardat, Y., Tashtoush, M. A., AlAli, R., & Jarrah, A. M. (2023). ChatGPT: A revolutionary tool for teaching and learning mathematics. Eurasia Journal of Mathematics, Science and Technology Education, 19(7), em2286. https://www.ejmste.com/article/chatgpt-a-revolutionary-tool-for-teaching-and-learning-mathematics-13272?trk=article-ssr-frontend-pulse_x-social-details_comments-action_comment-text
