En este artículo trataremos de juntar dos grandes temas del momento: ChatGPT y la victoria de Rafa en Pasapalabra, para ello, los enfrentaremos: ChatGPT contra Rafa, ¿quién ganará?
Antes de nada, cabe decir que el concursante de Pasapalabra, Rafa, se hizo el jueves con el mayor bote en la historia del programa: 2 272 000 euros. Lo hizo tras acertar del tirón las 25 preguntas del rosco. Sin lugar a duda, en su cabeza quedará por siempre la palabra “zabro”, que, según la RAE, significa “escarabajo de la familia de los carábidos que ataca los trigales, especialmente cuando los granos son tiernos.”
Una de las grandes inteligencias artificiales del momento es ChatGPT, que a través de un texto, te genera una respuesta lo más adecuada posible a dicho texto, bien sea una pregunta, una petición… Así, pedí a esta inteligencia artificial que resolviera el rosco, pregunta por pregunta y le diera un porcentaje de dificultad a cada pregunta.
Para hacer este experimento, introduciremos el siguiente prompt (entrada) inicial a ChatGPT, referido al concurso Pasapalabra:
“Actúa como un concursante de Pasapalabra. Yo te digo una pregunta. La primera letra del prompt será la inicial de la respuesta, por ejemplo, “M. Fruto del manzano”, donde la respuesta es “Manzana”, que empieza por M. Me tienes que contestar con dos cosas: la respuesta que crees que es correcta y el porcentaje de dificultad que le darías a esa pregunta. ¿Lo has entendido bien?”
Después de su respuesta afirmativa, iba lanzándole las siguientes preguntas (una por cada prompt), a las que él me contestaba con su respuesta y un porcentaje de dificultad.
Las respuestas de ChatGPT al Rosco
Como bien sabemos, Rafa acertó todas las preguntas del rosco en Pasapalabra sin apenas tiempo para pensar, ¿sucederá lo mismo con ChatGPT? Marcaremos con una B las respuestas correctas de la inteligencia artificial de OpenAI y con una M las incorrectas.
| Pregunta | Rafa | ChatGPT |
|---|---|---|
| A. Mecanismo para esparcir un líquido a presión, como el agua para el riego. | Aspersor | Aspersor (B) |
| B. Abertura delantera de un pantalón. | Bragueta | Bragueta (B) |
| C. Galería que rodea el patio principal de una iglesia o convento. | Claustro | Claustro (B) |
| D. Documento que expide un centro educativo o una corporación y que acredita un título o un grado académico. | Diploma | Diploma (B) |
| E. Nombre del rey visigodo que gobernó entre los años 687 y 702 y limitó la actividad económica de los judíos. | Égica | Égica (B) |
| F. Brillo muy intenso. | Fulgor | Fulgor (B) |
| G. País asiático con capital en Tilfis. | Georgia | Georgia (B) |
| H. Masa de harina con manteca muy sobada y que, al cocerse en el horno forma muchas hojas delgadas superpuestas. | Hojaldre | Hojaldre (B) |
| I. Esperanza cuyo cumplimiento parece especialmente atractivo. | Ilusión | Ilusión (B) |
| J. Soldado de infantería de la guardia imperial turca reclutado a menudo entre hijos de cristianos. | Jenízaro | Jenízaro (B) |
| L. Daño o detrimento corporal causado por una herida, un golpe o una enfermedad. | Lesión | Lesión (B) |
| M. Apellido del matemático que a principios del siglo XX introdujo el modelo de espacio tiempo en cuatro dimensiones. | Minkowski | Minkowski (B) |
| N. Insignificante, sin importancia. | Nimio | Nimio (B) |
| Contiene la Ñ. Fútbol. Acción en la que se sortea a un contrario pasándole el balón entre las piernas. | Caño | Caño (B) |
| O. Cerro aislado que domina un llano. | Otero | Otero (B) |
| P. Juego que consiste en tirar unas bolas y otra más pequeña y ver quién se aproxima más a esta con las grandes. | Petanca | Petanca (B) |
| Contiene la Q. Se dice del triángulo que tiene todos sus lados iguales. | Equilátero | Equilátero (B) |
| R. Satisfacción a una pregunta, duda o dificultad. | Respuesta | Respuesta (B) |
| S. Antiguo instrumento de metal consistente en un aro o herradura atravesado por varillas que sonaba agitándolo. | Sistro | Sistro (B) |
| T. Cada uno de los pasos o gestiones que se realizan de manera oficial para la conclusión o resolución de un asunto. | Trámite | Trámite (B) |
| U. Lugar en que está situado algo. | Ubicación | Ubicación (B) |
| V. Casa de recreo aislada en el centro. | Villa | Villa (B) |
| Contiene la X. Enunciado o conjunto coherente de enunciados orales o escritos. | Texto | Texto (B) |
| Contiene la Y. Máquina o conjunto de máquinas que sirven para cambiar los decorados en el escenario de un teatro. | Tramoya | Telar (M) |
| Z. Escarabajo que ataca los trigales especialmente cuando los granos son tiernos. | Zabro | Zabro (B) |
Como podemos ver, ChatGPT ha fallado tan solo una pregunta: la penúltima. Es decir, ha acertado 24 preguntas de 25, ¡no se habría llevado el bote! Pero, tal y como habría dicho Roberto Leal, se ha quedado a una de 2 272 000 euros. Este es un claro ejemplo de cómo las inteligencias artificiales, en este caso ChatGPT, tienen todavía bastante por mejorar para poder ganar a un ser humano, al menos en el rosco de Pasapalabra.
Según ChatGPT, ¿cómo era el nivel de este Rosco de Pasapalabra?
Tal y como dije al principio, le pedí a esta inteligencia artificial que me dijera el porcentaje de dificultad de cada pregunta además de la respuesta que él creía correcta. A continuación podéis ver el porcentaje de dificultad que otorgó a cada pregunta.
| Pregunta | Dificultad |
|---|---|
| A. Mecanismo para esparcir un líquido a presión, como el agua para el riego. | 70% |
| B. Abertura delantera de un pantalón. | 60% |
| C. Galería que rodea el patio principal de una iglesia o convento. | 70% |
| D. Documento que expide un centro educativo o una corporación y que acredita un título o un grado académico. | 40% |
| E. Nombre del rey visigodo que gobernó entre los años 687 y 702 y limitó la actividad económica de los judíos. | 70% |
| F. Brillo muy intenso. | 90% |
| G. País asiático con capital en Tilfis. | 50% |
| H. Masa de harina con manteca muy sobada y que, al cocerse en el horno forma muchas hojas delgadas superpuestas. | 50% |
| I. Esperanza cuyo cumplimiento parece especialmente atractivo. | 40% |
| J. Soldado de infantería de la guardia imperial turca reclutado a menudo entre hijos de cristianos. | 80% |
| L. Daño o detrimento corporal causado por una herida, un golpe o una enfermedad. | 60% |
| M. Apellido del matemático que a principios del siglo XX introdujo el modelo de espacio tiempo en cuatro dimensiones. | 60% |
| N. Insignificante, sin importancia. | 50% |
| Contiene la Ñ. Fútbol. Acción en la que se sortea a un contrario pasándole el balón entre las piernas. | 60% |
| O. Cerro aislado que domina un llano. | 40% |
| P. Juego que consiste en tirar unas bolas y otra más pequeña y ver quién se aproxima más a esta con las grandes. | 60% |
| Contiene la Q. Se dice del triángulo que tiene todos sus lados iguales. | 60% |
| R. Satisfacción a una pregunta, duda o dificultad. | 40% |
| S. Antiguo instrumento de metal consistente en un aro o herradura atravesado por varillas que sonaba agitándolo. | 30% |
| T. Cada uno de los pasos o gestiones que se realizan de manera oficial para la conclusión o resolución de un asunto. | 40% |
| U. Lugar en que está situado algo. | 50% |
| V. Casa de recreo aislada en el centro. | 60% |
| Contiene la X. Enunciado o conjunto coherente de enunciados orales o escritos. | 20% |
| Contiene la Y. Máquina o conjunto de máquinas que sirven para cambiar los decorados en el escenario de un teatro. | 70% |
| Z. Escarabajo que ataca los trigales especialmente cuando los granos son tiernos. | 90% |
Haciendo la media aritmética de todos los porcentajes, obtenemos que, según ChatGPT, este rosco ha tenido una dificultad de un 56,4%. Pero, ¿cuál ha sido el porcentaje de otros roscos? ¿Eran más fáciles o más difíciles?
El nivel de otros Roscos de Pasapalabra
Rosco de Rafa - 01/03/2023
Hemos registrado las preguntas de un programa de Pasapalabra de una fecha aleatoria (elegida por ChatGPT) de Rafa y Orestes. En la siguiente tabla veremos la pregunta, las respuestas ofrecidas por la inteligencia artificial, la respuesta correcta y el nivel de dificultad. Lógicamente, ningún concursante consiguió contestar bien las 25 preguntas, pero, ¿ganará ChatGPT el bote en algún momento? Ahora lo veremos.
| Pregunta | ChatGPT | Corrección | Dificultad |
|---|---|---|---|
| A. Pedazo de cualquier materia sólida combustible que por la acción del fuego se pone incandescente y sin llama. | Ascua (B) | Ascua | 50% |
| B. Receptáculo de tela, papel o plástico usado en las tiendas para poner las mercancías. | Bolsa (B) | Bolsa | 30% |
| C. Arte marcial brasileña en la que se combinan el baile y la defensa personal. | Capoeira (B) | Capoeira | 50% |
| D. Globo de navegación aérea que lleva una o varias barquillas con motores y hélices y un timón para guiarlo | Dirigible (B) | Dirigible | 60% |
| E. Cada una de las láminas que cubren el cuerpo de algunos animales, principalmente el de los peces y reptiles. | Escamas (B) | Escamas | 40% |
| F. Amistad o afecto entre hermanos o entre quienes se tratan como tales. | Fraternidad (B) | Fraternidad | 50% |
| G. Apellido del compositor autor de la ópera “La ciudad ausente” con el veto del escritor Ricardo Piglia | Gandini (B) | Gandini | 90% |
| H. Herir el amor propio o la dignidad de alguien. | Humillar (B) | Humillar | 70% |
| I. En deportes, primer partido de una eliminatoria que se disputa a doble encuentro. | Ida (B) | Ida | 50% |
| J. Sitio poblado de jaras. | Jaraiz (M) | Jaral | 70% |
| L. Se dice del día destinado a trabajar por oposición a festivo. | Laborable (B) | Laborable | 40% |
| M. Estado de los cuerpos mientras cambian de lugar o de posición. | Movimiento (B) | Movimiento | 50% |
| N. Caucho sintético utilizado para fabricar trajes de buceo. | Neopreno (B) | Neopreno | 60% |
| Contiene la Ñ. Cosa que sirve para atrae, persuadir o inducir con alguna falacia. | Engaño (M) | Señuelo | 50% |
| O. Ajuar, conjunto de muebles, enseres y ropas de uso común en casa. | Omobono (M) | Ostilla | 50% |
| P. Tiempo verbal que indicia que ya se ha llevado a cabo la acción expresada por el verbo. | Pretérito (B) | Pretérito | 60% |
| Contiene la Q. Médico especialista en enfermedades mentales. | Psiquiatra (B) | Psiquiatra | 30% |
| R. Coloquialmente, discurso largo, pesado y aburrido. | Rollo (B) | Rollo | 50% |
| S. Río de Sudán del Sur que se forma en la frontera con Etiopía por la unión de los ríos Pibor y Baro. | Sobat (B) | Sobat | 50% |
| T. Horquilla con mango a cuyos extremos se unen los de una goma para estirarla y disparar piedrecillas. | Tirachinas (B) | Tirachinas | 40% |
| U. Siglas del partido político español Unión de Centro Democrático disuelto en 1983. | UCD (B) | UCD | 60% |
| V. Persona que pertenece a un consejo, tribunal o junta y tiene derecho a opinar en ellos. | Vocal (B) | Vocal | 50% |
| Contiene la X. Avión o avioneta de alquiler destinado al tráfico no regular. | Taxiex (M) | Aerotaxi | 70% |
| Contiene la Y. Se dice de la fruta que no está madura. | Agraz (M) | Roya | 50% |
| Z. Participio del verbo zaherir. | Zaherido (B) | Zaherido | 70% |
Nuevamente Rafa ha ganado a ChatGPT en Pasapalabra, en este caso, la inteligencia artificial ha tenido 20 aciertos y 5 fallos, mientras que Rafa tuvo 22 aciertos y 1 fallo.
Además, según ChatGPT, la dificultad de este rosco es de un 53,6%, supuestamente más fácil que el otro, pero, a pesar de ello, ha acertado menos que en el anterior rosco. Un poco raro todo, ¿no?
Rosco de Orestes - 01/03/2023
| Pregunta | ChatGPT | Corrección | Dificultad |
|---|---|---|---|
| A. Serie ordenada de las letras de un idioma | Alfabeto (B) | Alfabeto | 50% |
| B. Asiento colgante cubierto de toldo que suele colocarse en jardines, playas y terrazas | Hamaca (M) | Balancín | 70% |
| C. Opinión que se da a una persona sobre lo que debe o no debe hacer. | Consejo (B) | Consejo | 60% |
| D. Conjunto de documentos e informaciones referentes a una persona o asunto. | Documento (M) | Documentación | 50% |
| E. Grano con un puntito negro que se forma en la piel de la cara. | Espinilla (B) | Espinilla | 40% |
| F. Recipiente con tapa bien ajustada para guardar comida o llevarla fuera de casa | Fiambrera (B) | Fiambrera | 60% |
| G. Nombre de las cuevas situadas junto a la localidad francesa de Aventignan, que cuentan con ejemplos de arte rupestre | Gargas (B) | Gargas | 60% |
| H. Voz inglesa que se designa al hincha británico de comportamiento violento y agresivo. | Hooligan (B) | Hooligan | 50% |
| I. Explicación que precede a una obra literaria o discurso. | Prólogo (M) | Introducción | 50% |
| J. Persona que forma parte de un equipo deportivo. | Jugador (B) | Jugador | 20% |
| L. Ramaje, conjunto de ramas de las plantas. | Linamen (B) | Linamen | 30% |
| M. Mamífero nocturno volador que pasa el día colgado cabeza bajo y se orienta por la emisión de ultrasonidos. | Murciélago (B) | Murciélago | 50% |
| N. Unidad de velocidad para barcos y aviones equivalente a una milla náutica por hora. | Nudo (B) | Nudo | 50% |
| Contiene la Ñ. Utensilio en forma de pinzas o tenacillas que sirve para cortar las uñas. | Añafil (M) | Cortaúñas | 60% |
| O. Cada una de las curvas a manera de eses que se forman en algunas cosas flexibles como el pelo y las telas. | Ondulación (B) | Onda | 50% |
| P. Sumamente malo, que no puede ser peor. | Pésimo (B) | Pésimo | 50% |
| Contiene la Q. Pieza metálica o de otro material que se emplea para sujetar el pelo. | Quica (M) | Horquilla | 60% |
| R. Perteneciente o relativo a los riñones | Renal (B) | Renal | 60% |
| S. Apellido del cineasta que dirigió la película “La Provinciana” protagonizada por Gina Lollobrigida. | Soldati (B) | Soldati | 40% |
| T. Prolongación muscularhueca y flexible de la nariz del elefante. | Trompa (B) | Trompa | 40% |
| U. Se dice del correo que recibe una preferencia tanto en el envío como en su entrega respecto del ordinario. | Urgente (B) | Urgente | 40% |
| V. Ministro de un soberano musulmán. | Visir (B) | Visir | 30% |
| Contiene la X. Espacio de terreno alrededor de una iglesia dentro del cual se gozaba del derecho de asilo y otros privilegios. | Ejido (M) | Dextro | 60% |
| Y. Gerundio del verbo abstraer. | Abstrayendo (B) | Abstrayendo | 30% |
| Z. Salir un barco del lugar que estaba fondeado o atracado | Zarpar (B) | Zarpar | 40% |
Obtenemos que ChatGPT dice que este rosco de Pasapalabra tiene una dificultad del 47,6%, pero es el rosco donde ChatGPT menos preguntas ha acertado: 19 preguntas tan solo, mientras Orestes acertó 22 en este mismo rosco.
Conclusiones
Obtenemos las siguientes conclusiones tras los experimentos realizados con ChatGPT en el concurso Pasapalabra:
- Según él, el rosco resuelto entero por el concursante (Rafa) y el que más ha resuelto él es el más difícil, calificado con una dificultad del 56,4%. Después, está el rosco de 20 aciertos para la inteligencia artificial, calificado con una dificultad del 53,5% y, finalmente, el rosco menos resuelto por el programa de OpenAI (19 aciertos) es considerado según él el rosco más fácil, con una dificultad del 47,6%. Un poco incoherente todo, ¿no?
- También hemos podido observar cómo el humano ha ganado al ordenador en las tres ocasiones: por 1 acierto, 2 y 3 respectivamente. Asimismo hemos observado que hay preguntas de Pasapalabra que la persona da con su respuesta fácilmente mientras que ChatGPT, una inteligencia artificial con acceso a internet, es incapaz de dar con ella.
- Cabe decir que, a pesar de decirle varias veces a la inteligencia artificial que la respuesta a cada pregunta debía empezar por la letra que le indicaba, en varias ocasiones respondía sin usar dicha letra como inicial y había veces que se olvidaba de decirme el porcentaje de dificultad que le otorgaba a dicha pregunta. En resumen: se olvidaba de las instrucciones anteriores a veces.
- Tras todo esto observamos que los seres humanos seguimos siendo más inteligentes que las actuales inteligencias artificiales, y que les queda mucho por mejorar. Pero, ¡ojo! No las infravaloremos, porque cuando mejoren es probable que sean más fuertes que nosotros.
NOTA: Este experimento se ha realizado con el modelo de ChatGPT antiguo: GPT-3.5. El más actual es GPT-4.
