¿Pueden los profesores detectar Google Bard y ChatGPT?

Qué saber

• Sí, los profesores pueden detectar si el ensayo de un alumno se escribió con Google Bard y ChatGPT . Sin embargo, no podrán decirlo definitivamente ya que la eficacia de sus métodos es dudosa.
• Una de las principales herramientas para detectar contenido generado por IA es Turnitin, que también se ve afectada por el problema de generar falsos positivos y es posible que no siempre produzca resultados precisos.
• Las escuelas y universidades pueden considerar positivamente la integración de chatbots de IA en el sistema educativo en lugar de prohibir su uso.

La llegada de los chatbots de IA como Bard y ChatGPT ha causado un gran revuelo en el sector de la educación, por decir lo menos. No es ningún secreto que muchos estudiantes están utilizando estas tecnologías de inteligencia artificial de próxima generación para producir ensayos sobre la marcha para mejorar sus calificaciones. Pero muchos más simplemente lo están utilizando como una tecnología para mejorar su investigación y aprender mejor .

La represión del contenido generado por IA tiene como objetivo evitar que los estudiantes los usen como muletas, pero también impide que muchos estudiantes usen estas herramientas por temor a que los llamen tramposos. Pero, ¿pueden los profesores incluso detectar si el trabajo de los estudiantes fue generado por chatbots de IA como Bard y ChatGPT? La respuesta no es tan corta y seca como cabría esperar.

En este artículo, investigamos las afirmaciones hechas por quienes forman parte de la academia y averiguamos si el contenido generado por IA realmente puede detectarse como tal.

¿Pueden los profesores detectar si los estudiantes usan Google Bard o ChatGPT para escribir ensayos?

Esta es la pregunta en la mente de los estudiantes de todo el mundo. Dada la facilidad con la que los estudiantes pueden acceder y usar Bard y ChatGPT para redactar ensayos, la tarea de los profesores se ha vuelto ciertamente más difícil.

the fact that I’ve had 2 separate teachers email me about 2 separate students who both plagiarized their essays by using an AI generator… yikes.

this is going to become more common. thankfully we do have AI/plagiarism detectors to identify, but it shouldn’t happen at all.

— lexi ✨ (@misslexilouwho) March 30, 2023

Aprender a vencer una nueva tecnología que avanza al ritmo que avanzan estos chatbots de IA es, sin duda, una lucha cuesta arriba. Pero tal como está ahora, la facultad de su escuela o universidad puede ser capaz de averiguar si los ensayos de los estudiantes fueron escritos por ellos o copiados de las respuestas generadas por IA.

Aunque los estudiantes que usan ensayos escritos por Bard o ChatGPT a menudo terminarán reescribiendo, editando y citando las fuentes para dar a sus ensayos la apariencia de trabajo original y rigor académico, los maestros y profesores también tienen algunos trucos bajo la manga para averiguar si el estudiante los ensayos en realidad usan chatbots para hacer el trabajo por ellos.

Cómo los profesores están aprendiendo a identificar el uso de Bard y ChatGPT

Hay algunas maneras en que los profesores ya pueden determinar orgánicamente si un ensayo está escrito o no por el estudiante en sus propias palabras. Gran parte se reduce a la propia comprensión del profesor de lo que un estudiante en particular puede o no puede hacer. Entonces, si un profesor conoce las habilidades lingüísticas de un estudiante, su nivel de dicción, comprensión, frases de uso común, estructuras sintácticas, etc., entonces cualquier desviación de sus idiosincrasias individuales (al menos por escrito) puede detectarse con relativa facilidad. , especialmente si es una partida demasiado marcada.

Por otro lado, debido a que estos chatbots de IA a menudo terminan generando respuestas que no son indicativas de una mente pensante y pueden ser bastante mediocres sin mucho análisis crítico, los profesores que conocen bien a sus estudiantes podrán detectarlo a una milla de distancia. .

Comentario
de u/ADHTeacher de la discusión ¿Cómo puedo saber cuándo mis estudiantes usan Chat GPT u otros escritores de inteligencia artificial?
en Profesores

Pero muchos estudiantes están contrarrestando esto dando indicaciones bien estructuradas para obtener las mejores respuestas posibles que son altamente individualizadas y similares a las humanas. Sin embargo, si los estudiantes usan herramientas de inteligencia artificial para escribir sus ensayos, los profesores también están encontrando formas de utilizar las mismas herramientas para averiguar si hay plagio involucrado.

Algunas herramientas de AI Detector que los profesores están usando

Así como los motores de búsqueda y los sitios web informativos como Google y Wikipedia fueron contrarrestados por una afluencia de herramientas de detección de plagio que están con nosotros hasta el día de hoy, la revolución de la IA también está generando muchas herramientas de detección de IA. Muchos miembros de la facultad ya han comenzado a usar algunas de estas herramientas de detección de plagio de IA, especialmente aquellos que enseñan a muchos más estudiantes de los que pueden contar o recordar por su nombre.

Algunas de estas herramientas detectoras de IA incluyen GPTZero , el clasificador de texto propio de OpenAI , Turnitin , etc. Aunque hay muchos más ejemplos de herramientas detectoras de plagio, estas han estado en el centro de atención por ser relativamente mejores para identificar contenido generado por IA sin generar demasiados falsos positivos (escritura humana marcada como IA).

¿Turnitin puede detectar ChatGPT?

A principios de este año, Turnitin anunció su detector de escritura AI que puede identificar si una pieza de prosa enviada por los estudiantes contiene oraciones escritas por ChatGPT y sus primos.

En un video de YouTube , David Adamson, un científico de inteligencia artificial de Turnitin, demostró cómo la herramienta puede detectar la originalidad de la prosa escrita, incluso cuando se cambiaron algunas de las oraciones y se realizaron ediciones menores. Aunque no hemos probado Turnitin nosotros mismos, el consenso general es que la herramienta hace un trabajo bastante bueno al capturar contenido de IA. Las nuevas capacidades de Turnitin son útiles para los profesores solo en el dominio de la escritura académica, sin embargo, no para probar códigos o poesía. Por lo tanto, si es un estudiante que confía en ChatGPT y Bard, debe tener en cuenta que las herramientas como Turnitin pueden atraparlo.

Sin embargo, hay algunas advertencias a esto también. Turnitin busca priorizar la precisión, lo que significa que quiere asegurarse de que el contenido que marca esté realmente escrito por IA. Pero también significa que definitivamente se perderá algún contenido escrito por IA. Aquí está David Adamson siendo honesto acerca de las capacidades de Turnitin a partir de ahora:

Turnitin tiene un 1 % de posibilidades de generar falsos positivos para la redacción de educación superior. El número puede no inspirar mucha esperanza. Pero para la escritura de secundaria y preparatoria, el porcentaje de falsos positivos puede ser mayor. Esto se debe en gran parte al hecho de que el software marcará la escritura repetitiva y redundante como generada por IA, incluso si no lo es. Pero todo eso se está trabajando. Entonces, en su mayor parte, parece que puede ser más difícil para los estudiantes hacer pasar la prosa escrita por IA como propia si tales herramientas se adelantan al juego. Improbable, pero posible.

Cómo combaten los profesores el uso de Bard y ChatGPT

Además de usar herramientas de detección de IA y comprender de lo que es capaz un estudiante, hay algunas otras formas en que los maestros y profesores están combatiendo el uso de Bard y ChatGPT.

En lugar de pedirles a los estudiantes que escriban ensayos sobre temas que han sido escritos hasta la saciedad y que están disponibles en línea, muchos miembros de la facultad están proponiendo preguntas de ensayo que se basan en debates en clase o que requieren un toque muy personal que refleje la honestidad del estudiante. opiniones individuales.

Además de eso, los maestros también están jugando con ChatGPT para comprender qué tipo de respuestas produce y el tipo de preguntas que hace un trabajo terrible al responder. Algunos han comenzado a ingresar los ensayos de los estudiantes en ChatGPT y preguntan si el contenido escrito fue producido por ChatGPT o una herramienta de inteligencia artificial similar.

Cómo el uso de IA para detectar contenido generado por IA puede dañar a algunos estudiantes

Cuando los chatbots de IA comienzan a hacer la mayor parte del trabajo, es menos probable que los estudiantes desarrollen un pensamiento crítico y comprendan las habilidades que intervienen en el acto mismo de escribir. Pero son muchos más los que no lo están usando para hacer trampas sino como sustituto de buscadores como Google porque les simplifica mucho la tarea de investigar.

Definitivamente, se puede argumentar acerca de aprender el acto de investigar en sí mismo, ya que ChatGPT no siempre puede descubrir las ideas más potentes y relevantes que solo se pueden obtener leyendo artículos de investigación y comprendiendo los matices y el punto de vista del autor. Pero salvo eso, ChatGPT también puede obtener información de una amplia gama de fuentes que pueden ser muy útiles y pueden usarse como un portal para aquellos dominios donde realmente se encuentran los trabajos de investigación.

If you are a teacher/Academic who has detected that your students started using AI for their assignments.

Firstly
1) Don't shame them or make them feel guilty.
2) Talk to them about the prompts they used. (Learn from them).
3) Open up the class for a discussion on++

— Saiswaroopa (@Sai_swaroopa) March 26, 2023

Si a los estudiantes se les prohíbe estrictamente usar ChatGPT, sería un desperdicio terrible, no solo para el aprendizaje de los estudiantes en la escuela, sino también para su futuro en el mundo exterior para el que están siendo preparados.

¿Cómo se pueden integrar chatbots como Bard y ChatGPT en la educación?

Los chatbots como Bard y ChatGPT no pueden ser rechazados por la academia. En cambio, los profesores y maestros deberían alentar a los estudiantes a aprender la tecnología, sus ventajas y desventajas e integrarlos en el redil educativo.

I saw a teacher using chatgpt to get her students to write essays. They try various prompts and try and compile the best bits while adding their own insights. They have to point out what it got wrong, and find sources. I think there is a smart way for educators to use AI.

— Josh Martin (@joshalexmartin) March 24, 2023

Prohibir el uso de ChatGPT y chatbots de IA similares solo puede ser una solución a corto plazo. Un mayor crecimiento de la tecnología de IA invariablemente planteará desafíos únicos que pueden crecer más allá de la capacidad de las herramientas de detección de IA como Turnitin. Hasta entonces, la tarea de los profesores está bien recortada. Y los estudiantes pueden continuar, con cuidado, para obtener asistencia de ChatGPT y Bard.

Para concluir, sí, sus profesores tienen varias herramientas y trucos para identificar si los ensayos de los estudiantes se copian de ChatGPT y Bard. Sin embargo, dado que las herramientas de detección de IA siempre van a ponerse al día con los chatbots de IA, la mayoría de las veces se quedarán cortas. En lugar de prohibir el uso de estas tecnologías de inteligencia artificial de próxima generación, las escuelas y universidades deberían buscar integrarlas en el sistema educativo o idear formas nuevas e ingeniosas de evaluar a los estudiantes en su aprendizaje. Hasta que eso suceda, uno puede esperar que los estudiantes continúen aprovechando las herramientas de IA para sus tareas.