Lo que OpenAI está consiguiendo con GPT-3 es, en pocas palabras, impresionante. Este nuevo modelo de lenguaje es capaz de programar, diseñar, mantener conversaciones sobre temas complejos de forma fluida y, ahora, resumir libros enteros en un par de frases.
El sistema funciona de una forma bastante peculiar. En lugar de resumir el libro completo de una sola vez, lo hace reduciendo la tarea en tareas más pequeñas. Primero resume el texto original en secciones, luego resume esas secciones, que a su vez son resumidas en secciones más pequeñas y, finalmente, se consigue un resumen mucho más corto con la idea principal del libro.
De acuerdo a OpenAI, su modelo ajustado a partir de GPT-3 genera «resúmenes sensatos de libros enteros incluso igualando la calidad media de los resúmenes escritos por humanos». Aseguran que tiene una precisión de seis sobre siete con respecto a los humanos que han leído el libro el 5% de las veces y de cinco sobre siete con respecto a los humanos que han leído el libro el 15% de las veces.
OpenAI ha publicado una serie de resúmenes de libros en su web.
OpenAI entrenó al modelo con un dataset de libros, mayormente de ficción, que contenían unas 100.000 palabras de media. Para evaluar el modelo, seleccionaron los 40 libros más populares de 2020 y encargaron a dos personas que los leyeran, hicieran un resumen y luego evaluaran el resumen hecho por la IA.
