El primero de una serie de artículos que evalúan ChatGPT como editor asistente.
La asistencia puede ser útil. Crédito de la foto: el autor.
Como alguien que trabaja en tecnología y disfruta leyendo y escribiendo ficción, me preguntaba cómo la Inteligencia Artificial Generativa (GenAI) podría ayudar con la escritura creativa. El énfasis aquí está en escribir dentro de un proceso creativo y no en el proceso creativo en sí. No he visto nada que me convenza de que una GenAI pueda rivalizar con un escritor humano creativo, al menos no de manera consistente y a lo largo de una historia compleja. No obstante, he llegado a creer que un “segundo par de ojos” tiene un papel que una GenAI puede proporcionar a un proceso de escritura creativa. Recientemente leí el artículo de Doshi y Hauser (“La inteligencia artificial generativa mejora la creatividad”).[1]. Este artículo hace la siguiente poderosa afirmación sobre las GenAI:
Las historias escritas con acceso a ideas GenAI se consideran mejor escritas y más divertidas, con mejoras de hasta un 22% a un 26% entre los escritores menos creativos. A pesar de las evaluaciones subjetivas más positivas, un análisis que utiliza incrustaciones de los textos demuestra que las historias de escritores con acceso GenAI son más similares entre sí…
Es importante señalar que el artículo de Doshi y Hauser analiza tareas de “creatividad abierta”: cómo GenAI puede mejorar la capacidad humana para producir contenido creativo, y este artículo se centra en el uso de GenAI para reescribir ficción. No obstante, tiene ideas que parecen aplicables. Este artículo comienza con esta pregunta. ¿Puedo comenzar con un borrador de texto creativo y, a través de un proceso colaborativo con GenAI, iterarlo y perfeccionarlo? ¿Podemos reescribir el original a través de un proceso editorial compartido?
Este artículo es el primero de una serie que explora y evalúa dicha colaboración. Para este artículo, se utiliza ChatGPT (GPT-4) con el intérprete de código (CI) [2]. ChatGPT utiliza el CI para verificar si su reescritura cumple con los criterios de recuento de palabras y oraciones solicitados. Por ejemplo, en este artículo, le pedimos a ChatGPT que reescriba el texto utilizando al menos el 60% de las palabras originales. ChatGPT escribirá y ejecutará un script de Python en el CI para medir su rendimiento. De esta manera, podemos confiar en que el texto de ChatGPT es preciso. Puedes leer más sobre este proceso en [3].
Un mensaje para pedirle a ChatGPT que reescriba su texto puede ser tan simple como:
Vuelva a escribir el siguiente ejemplo de texto para que quede más claro.
Ejemplo de texto:
“`
…Tu texto va aquí…
“`
Puedes simplificar aún más el ejemplo anterior. No necesitas estrictamente la etiqueta “Muestra de texto:” ni las comillas triples que parecen código Python. Estos son útiles si su entrada tiene una estructura compleja o cuando tiene varias muestras de texto a las que desea hacer referencia en su mensaje. Tengo la costumbre de utilizarlos para ayudarme con las indicaciones de lectura más adelante.
Este artículo fue escrito a lo largo de varias sesiones o experimentos de ChatGPT. Dos de esas sesiones están vinculadas al final de este artículo. El último mensaje utilizado se proporciona a continuación. Es un mensaje bastante complicado con muchos consejos para ChatGPT sobre cómo debería reescribir el texto. Contiene reglas sobre el uso de palabras y oraciones. Cuando escriba indicaciones, tenga en cuenta que es posible que ChatGPT no considere todas sus indicaciones por igual. Hay muchas razones por las que puede ignorar o redoblar los consejos que usted brinda, pero el orden rápido es una de ellas. [4].
Vuelva a escribir el siguiente ejemplo de texto para que quede más claro. Utilice la siguiente guía:
Asegúrese de reutilizar al menos el 60% de las palabras del texto de muestra.
Asegúrese de que su reescritura tenga al menos el 60% de la cantidad de palabras que tiene el texto de muestra.
Asegúrese de que el número total de oraciones en la reescritura coincida al menos con el número de oraciones en el texto de muestra.
Para cada oración, calcula el número de puntos de estrés. Asegúrese de que la desviación estándar del número de puntos de énfasis en cada oración esté dentro del 25% entre sí tanto para la reescritura como para la original.
Para demostrar que no está alucinando, proporcione un programa Python que pueda verificar el recuento de palabras y mi restricción de reutilización de palabras.
El mensaje anterior tiene dos elementos a los que debes prestar atención: recuento de palabras y características de las oraciones. El recuento de palabras es cuántas palabras se utilizan en total y cuántas palabras se comparten entre el texto original y el reescrito. Las características de la oración son cuántas oraciones hay y cómo se distribuyen los puntos de estrés entre ellas. Calcularlos requiere el intérprete de código de ChatGPT (o un equivalente si se usa otra GenAI).
A continuación se muestra el texto original de ciencia ficción. Fue proporcionado por el autor y tiene calidad de borrador. ChatGPT lo reescribió usando el mensaje anterior.
El “Biomedic” llegó a nosotros en un nuevo producto masivo presentado por Mars Corp. Era una maravilla de la electrónica y el embalaje.
El dispositivo se condensó en un formato de reloj de pulsera que gestionaba una amplia gama de biosensores de última generación, monitoreando tanto al usuario como su entorno adaptado a las nuevas amenazas microbianas a la salud en nuestro mundo posterior al cambio climático. Su genio surgió de la electrónica miniaturizada y la química orgánica. Los pequeños módulos permitieron el seguimiento de la salud en tiempo real y recetas bajo demanda con solo presionar un botón.
Durante hasta una semana sin reposición, puede realizar pruebas para controlar su salud, hablando con un sensor de implante colocado en su muñeca y con su entorno. Si en algún momento detecta que necesita un ajuste en su escudo microbiano (una vacuna, antivirales, antiesporas, antibióticos, un cambio de cultura biómica), se emite una receta inalámbrica, lo que sea que necesite para mantenerse saludable: una inyección, una pastilla. , un spray, un parche. Con solo presionar un botón. Se podía obtener en minutos desde cualquier bioimpresora, y había millones de ellas, al parecer, en un radio de 10 millas a tu alrededor.
Su otra maravilla fue su cerebro electrónico: una EFS o Inteligencia Artificial Socializada. La EFS desempeñó un papel único como enlace de lengua plateada entre la persona, su reloj de pulsera y su cuerpo, es decir, los implantes de sensores y el mundo externo, especialmente las bioimpresoras y el personal médico remoto si se necesitaba más ayuda.
En los enlaces de sesión de ChatGPT al final de este artículo (Sesión 1), ChatGPT intentó reescribir una muestra de texto para satisfacer el mensaje que ingresé. Intentó editar el texto para leerlo con mayor claridad y generar una reescritura que pasó el código de prueba de Python. El código de prueba fue generado por ChatGPT como parte del paso de reescritura y fue ejecutado por Code Interpreter. En la sesión 1, ChatGPT falló cuatro veces al pasar el código de prueba con umbrales de recuento de palabras elevados (75 %/100 %). Sin embargo, hizo que el texto fuera más breve y claro. En la sesión 2, ChatGPT utilizó umbrales más bajos (60%) y pasó el código de prueba en el primer intento. Esto sugiere que el texto original tenía demasiadas palabras y que una buena reescritura debería reducir su extensión. Por lo tanto, mi mensaje pidiendo a ChatGPT que coincidiera con el recuento de palabras original iba en contra de su objetivo de aclarar el texto.
El texto final reescrito de ChatGPT se encuentra a continuación. Es el resultado de la Sesión 2 en el Enlaces de sesión de ChatGPT al final de este artículo.
“Biomedic” es un producto innovador de Mars Corp, que ejemplifica la electrónica de última generación.
Este dispositivo, diseñado como un reloj de pulsera, está equipado con biosensores avanzados. Vigila tanto al usuario como al medio ambiente frente a nuevos peligros microbianos tras el cambio climático. Su eficiencia se debe a su electrónica miniaturizada y química orgánica. Estos módulos ofrecen información de salud inmediata y proporcionan recetas con solo tocar un botón.
Puede funcionar durante una semana sin recargar, evaluando su salud mediante un sensor implantado en su muñeca y observando el entorno. Si detecta un riesgo para la salud, proporciona el remedio necesario, ya sea una vacuna, antivirales o antibióticos. Con una simple pulsación, podrás obtener el medicamento de cualquier bioimpresora cercana.
El dispositivo también cuenta con una SAI, una Inteligencia Artificial Socializada. El SAI actúa como un puente entre el usuario, sus sensores y el mundo exterior, conectándose con bioimpresoras y profesionales médicos cuando es necesario.
Observe que la reescritura de ChatGPT anterior es más corta que la original (69 % de las palabras del original) y tenga en cuenta que de las cuatro métricas que se generaron (Figura 4), las tres primeras cumplieron con los criterios solicitados. El cuarto (desviaciones estándar de los puntos de tensión) no lo hizo.
Figura 1. Las métricas de salida reescritas, según el mensaje.
Discusión
Anteriormente, presentamos un mensaje que especificaba las propiedades por las que ChatGPT debería esforzarse. El mensaje le pedía a ChatGPT que reescribiera el texto dentro de los límites de recuento/reutilización de palabras y énfasis de la oración. Estos se utilizaron en este artículo para alentar a ChatGPT a preservar el estilo del texto original en la reescritura.
Cuando un autor ya ha decidido la estructura y el estilo de su escritura, es posible que desee que GenAI respete sus elecciones y genere borradores similares a los suyos. Sin embargo, cuando el autor todavía está explorando diferentes ideas y posibilidades, podría beneficiarse de una mayor diversidad de estilos de texto.
Considere alentar a ChatGPT a ir más allá de su estilo de escritura al reescribir su texto. Por ejemplo, intente pedirle a ChatGPT que reescriba su texto en otro estilo. Esto puede ayudarle a comparar y contrastar cómo diferentes palabras y oraciones pueden transmitir su mensaje. Por ejemplo, según el mensaje anterior, podrías pedirle explícitamente a ChatGPT que reescriba en otro estilo:
Vuelva a escribir el siguiente ejemplo de texto para que quede más claro. Por favor, reescriba el texto al estilo de Ernest Hemingway…
En este artículo, le pedí a ChatGPT que siguiera las métricas de palabras y oraciones para intentar alentarlo a que se apegara a mi estilo de escritura. En un artículo posterior, analizaré la eficacia de estas métricas. Es posible que no desee que su asistente ChatGPT se vea limitado de esta manera; como se mencionó, si todavía está explorando la mejor manera de editar y presentar sus ideas, es posible que desee fomentar una mayor libertad.
Como anécdota, he notado que, a menos que se indique lo contrario, ChatGPT tiende a ser menos diverso en su estilo editorial. Si compara mi borrador y la versión final reescrita de mi borrador, está claro que la reescritura de ChatGPT es más sencilla y tiene una voz más activa, efectiva en muchos sentidos. Pero ha abandonado el proceso de pensamiento fluido de la narrativa original, que creo que podría ser valioso si se limpia. Idealmente, a través de un proceso de reescritura, debería poder matizar el estilo de salida.
Para terminar, me gustaría volver al punto de partida. Artículo de Doshi y Hauser (“La inteligencia artificial generativa mejora la creatividad”)[1] ofrece una nota de advertencia de alto nivel sobre ChatGPT y el proceso creativo:
…nuestros hallazgos sugieren que las historias producidas se volverían menos únicas en conjunto y más similares entre sí, un efecto que puede intensificarse con el tiempo, ya que muchos modelos GenAI utilizan el corpus de texto existente y la literatura publicada para entrenar y refinar sus algoritmos y predicciones, reduciendo así aún más la diversidad.
Creo que lo mismo se aplica a los procesos creativos tácticos, como editar y reescribir textos creativos. Es valioso colaborar con un editor menos imaginativo pero despiadadamente inspirado. Un par de ojos extra, incluso los de máquina son útiles al revisar borradores.
Enlaces de sesión de ChatGPT
Seleccione transcripciones de sesiones guardadas con ChatGPT para este artículo.
Sesión 1: ChatGPT se quedó corto cuatro veces al intentar satisfacer la restricción del recuento total de palabras; su reescritura fue consistentemente más corta que el texto original.
https://chat.openai.com/share/550531c0-26c3-43d7-90d7-a4b98837508c
Sesión 2: Repaso completo con un menor número de palabras y…