PyE
UN ESFUERZO MEDIOCRE
IA abierta – el creador de ChatGPT – lanzó un «clasificador para indicar texto escrito por IA» a fines de enero.
El clasificador fue entrenado en IA externas, así como en los propios motores de generación de texto de la empresa. En teoría, esto significa que debería poder marcar ensayos generados por BLOOM AI o similar, no solo aquellos creados por ChatGPT.
Le damos a este clasificador una calificación C- en el mejor de los casos. OpenAI admite que identifica con precisión solo el 26 por ciento del texto generado por IA (verdadero positivo), mientras que etiqueta incorrectamente la prosa humana como generada por IA el 9 por ciento de las veces (falso positivo).
OpenAI no ha compartido su investigación sobre la tasa a la que el texto generado por IA se etiqueta incorrectamente como texto generado por humanos (falso negativo).
UN CONTENEDOR PROMETEDOR
Un competidor más prometedor es un clasificador creado por un estudiante de la Universidad de Princeton durante sus vacaciones de Navidad.
Edward Tian, un estudiante de informática con mención en periodismo, lanzó la primera versión de GPTZero en enero.
Esta aplicación identifica Autoría de IA basado en dos factores: perplejidad y explosión. La perplejidad mide qué tan complejo es un texto, mientras que la ráfaga compara la variación entre oraciones. Cuanto más bajos sean los valores de estos dos factores, más probable es que un texto haya sido producido por una IA.
Enfrentamos a este modesto David contra el goliat de ChatGPT.
Primero, solicitamos a ChatGPT que generara un breve ensayo sobre la justicia. A continuación, copiamos el artículo, sin cambios, en GPTZero. La herramienta de Tian determinó correctamente que era probable que el texto hubiera sido escrito en su totalidad por una IA porque sus puntajes promedio de perplejidad y explosión eran muy bajos.
