Si bien cuando salió al mundo ChatGPT parecía que iba a gobernar con puño de hierro, destruyendo millones de empleos, la realidad es que esta herramienta de OpenAI ha pasado de ser increíble… a apenas un meme en menos de 6 meses.
ChatGPT está cambiando, aunque hasta ahora ha sido increíblemente difícil decir cómo o por qué. Los usuarios se han quejado mucho de que el modelo de lenguaje GPT-4 que alimenta la versión de pago del chatbot de OpenAI se ha ido degradando con el tiempo, dando respuestas falsas y negándose a seguir las indicaciones que antes acataba.
Y ahora una nueva investigación muestra que, efectivamente, la IA ha experimentado algunos cambios bastante profundos, aunque quizá no de la forma que los usuarios esperan.
Una IA más tonta y menos precisa
Un nuevo artículo publicado en el archivo de preimpresiones ArXiv por investigadores de la Universidad de Stanford y la Universidad de Berkeley afirma que GPT-4 y GPT-3.5 responden hoy de forma diferente a como lo hacían hace unos meses, y no siempre para mejor.
Los investigadores descubrieron que GPT-4 arrojaba respuestas mucho menos precisas a algunas preguntas matemáticas más complicadas. Antes, el sistema era capaz de responder correctamente a preguntas sobre números primos a gran escala casi siempre que se le preguntaba, pero más recientemente sólo respondía correctamente a la misma pregunta el 2,4% de las veces.
Las versiones anteriores del robot explicaban su trabajo con más detalle, pero las ediciones modernas eran mucho menos propensas a dar una guía paso a paso para resolver el problema, incluso cuando se le pedía.
En el mismo periodo de tiempo, entre marzo y junio de este año, la versión más antigua, GPT 3.5, se volvió mucho más capaz de responder a problemas matemáticos básicos, aunque seguía siendo muy limitada a la hora de analizar la generación de códigos más complejos.
Se ha especulado mucho en Internet sobre si ChatGPT está empeorando con el tiempo. En los últimos meses, algunos usuarios habituales de ChatGPT en sitios como Reddit y otros han cuestionado abiertamente si el chatbot de GPT-4 está empeorando o si simplemente se están dando cuenta de las limitaciones del sistema.
Algunos usuarios informaron de que, cuando se le pedía al bot que reestructurara un texto, éste ignoraba sistemáticamente la indicación y escribía pura ficción. Otros señalaron que el sistema fallaba en tareas relativamente sencillas de resolución de problemas, ya fueran matemáticas o de codificación.
Algunas de estas quejas pueden haber provocado en parte que la participación en ChatGPT haya descendido por primera vez desde que la aplicación entró en funcionamiento el año pasado. Y el estudio concluye que sí, que ChatGPT funciona peor que hace seis meses.
Algunos de los enlaces añadidos en el artículo forman parte de campañas de afiliación y pueden representar beneficios para Softonic.
