Libro de Actas del III Congreso Latinoamericano y del Caribe e Investigación en Educación Superior- LatinSoTL- 2025

159 Figura 2. Longitud de los prompts de los estudiantes (número de caracteres) Este piloto no solo ha servido para poner a prueba la viabilidad técnica de la solución implementada, sino también para explorar cómo los estudiantes interactúan con sistemas de IA Generativa dentro del marco de una asignatura de programación. Precisamente la industria del desarrollo de software y la programación de código están siendo impactadas fuertemente por los avances en los LLMs y por el desarrollo de herramientas y entornos que hacen uso de IA Generativa para facilitar las labores de desarrollo de software (Sauvola et al., 2024). Los resultados de este piloto abren la puerta a futuras fases de análisis más detallado y a la posibilidad de integrar el uso de estos chatbots como herramientas permanentes de apoyo, así como recursos para fomentar competencias de alfabetización en IA. Conclusiones Este trabajo ha presentado los resultados de un piloto de utilización de un chatbot de IA Generativa que hace uso de la técnica de RAG en una asignatura de primer año de programación en ingeniería. El piloto no solo ha demostrado que un chatbot basado en IA Generativa con la técnica de RAG puede integrarse en una asignatura, sino que también ha puesto de manifiesto su valor como herramienta de apoyo al aprendizaje. El hecho de que el uso fuera libre y anónimo ha permitido observar comportamientos auténticos, lo que aporta una base para mejorar tanto la herramienta como su integración pedagógica. Además, contar con datos detallados sobre las conversaciones abre nuevas posibilidades para que el profesorado analice cómo los estudiantes piensan, preguntan y entienden, convirtiendo al chatbot no solo en un recurso de consulta, sino también en una fuente de información educativa valiosa y en un punto de partida para trabajar competencias en IA desde una perspectiva crítica y formativa. Precisamente, ya ha habido numerosos trabajos que han advertido de los efectos negativos que un uso excesivo y no controlado de la IA Generativa puede tener en el aprendizaje (Bastani et al., 2024; Gerlich, 2025). Las líneas de trabajo futuro se centran en la comprensión del uso de chatbots en educación. En primer lugar, se realizará un análisis de la calidad de los resultados de las conversaciones, prestando especial atención a la precisión, relevancia y coherencia