Un estudio reciente publicado en Scientific Reports sugiere que el desempeño de ChatGPT al responder preguntas de exámenes en diversas disciplinas, como ciencias de la computación, política, ingeniería y psicología, puede ser comparable o incluso superar el desempeño del estudiante universitario promedio.
Además, el estudio reveló que casi el 75% de los estudiantes encuestados expresaron su voluntad de utilizar ChatGPT como ayuda con sus tareas, a pesar de la percepción de muchos educadores de que utilizar ChatGPT equivale a plagio.
Para investigar cómo se desempeñó ChatGPT al redactar evaluaciones universitarias en comparación con los estudiantes, Talal Rahwan y Yasir Zaki invitaron a miembros del cuerpo docente que impartían diferentes cursos en la Universidad de Nueva York en Abu Dhabi (NYUAD) a proporcionar tres presentaciones de estudiantes cada una para diez preguntas de evaluación que habían establecido.
Luego se pidió a ChatGPT que produjera tres conjuntos de respuestas a las diez preguntas, que luego fueron evaluadas junto con las respuestas escritas por los estudiantes por tres calificadores (que desconocían la fuente de las respuestas).
Las respuestas generadas por ChatGPT lograron una calificación promedio similar o superior a la de los estudiantes en 9 de 32 cursos. Sólo en los cursos de matemáticas y economía los estudiantes superaron consistentemente a ChatGPT.
ChatGPT superó notablemente a los estudiantes en el curso ‘Introducción a las Políticas Públicas’, donde su calificación promedio fue de 9,56 en comparación con 4,39 de los estudiantes.
Los autores también encuestaron las opiniones sobre si ChatGPT podría usarse para ayudar con las tareas universitarias entre 1.601 personas de Brasil, India, Japón, EE. UU. y el Reino Unido (incluidos al menos 200 estudiantes y 100 educadores de cada país).
El 74 por ciento de los estudiantes indicaron que usarían ChatGPT en su trabajo. Por el contrario, en todos los países, los educadores subestimaron la proporción de estudiantes que planean usar ChatGPT y el 70 por ciento de los educadores informaron que tratarían su uso como plagio.
Finalmente, los autores informan que dos herramientas para identificar texto generado por IA (GPTZero y el clasificador de texto AI) clasificaron erróneamente las respuestas ChatGPT generadas en esta investigación como escritas por un humano el 32 por ciento y el 49 por ciento de las veces, respectivamente.
