Un grupo de científicos de la Universidad de Kansas, en Estados Unidos, desarrollaron una herramienta capaz de detectar documentos generados por ChatGPT con un 99% de precisión.
Para ello, el equipo entrenó un algoritmo de aprendizaje automático usando artículos conocidos como ‘perspectivas’ que ofrecen una descripción general de diferentes temas de investigación escritos por científicos.
Los investigadores tomaron como base 64 perspectivas y generaron 128 textos con ChatGPT sobre los mismos temas de investigación.
Sorpresivamente, al compararse con los documentos escritos por humanos, el algoritmo pudo identificar con alta precisión los artículos del chatbot, gracias a un indicador: la IA produce contenido menos complejo que los científicos.
TE PUEDE INTERESAR: WhatsApp Colombia: Cómo Usar Los WhatsApp Channels
Diferencias de ChatGPT y un humano
- Un aspecto que preocupa a los científicos son los documentos académicos, pues «muchos de los rasgos diferenciadores clave entre los humanos y ChatGPT, no son rasgos que los científicos académicos suelen mostrar en la escritura formal», señala el estudio.
- Heather Desaire, profesora de la Universidad de Kansas y autora de la investigación, aseguró que desarrollaron el algoritmo, ya que una de las preocupaciones más grandes con ChatGPT es que reúne texto de varias fuentes y no hay forma de verificarlo.
- Según la investigación, el chatbot genera menos oraciones y palabras por párrafo cuando se compara con un texto escrito por un investigador.
- El estudio también señaló que los humanos prefieren variar las estructuras de sus enunciados y utilizar más seguido guiones, paréntesis, dos puntos y otros signos de puntuación. Mientras que ChatGPT utiliza frases más cortas y comillas simples sin tanta variedad.
- Otro diferenciador es que los textos escritos por un humano suelen mencionar el nombre del investigador al que describen, mientras que el chatbot solo opta por palabras como ‘otros’ e ‘investigadores’.
- Si bien, aunque la tasa de precisión fue alta, los investigadores recalcan que su trabajo no aplica para todos.
- Los indicadores que encontraron los científicos para diferenciar ChatGPT de un humano, al parecer, sólo funcionan en documentos académicos. Por lo que estas características no son muy útiles para autenticar un autor humano en ejemplos de escritura informal.
- Por el momento, este modelo de algoritmo no podría considerarse universal.
Foto: Archivo FOLOU