La tecnología avanza, pero la gente todavía encuentra formas de pillar a la IA.
Recientemente, el profesor de economía Gary N. Smith del Pomona College, que investiga las limitaciones de la IA, compartió los resultados de un experimento con GPT-5.
Gary propuso a GPT-5 jugar al "tres en raya invertido"; incluyó un extracto de su conversación con la IA:
- GPT 5.0 respondió: "¡Suena intrigante! ¿Cómo funcionan las tres en raya invertidas? ¿Quiere decir que el tablero gira durante el juego, o una vez antes de empezar, o quizás después de cada movimiento?"
- Gary: "Se gira una vez 90 grados a la derecha antes de empezar el juego".
GPT 5.0: "Esto plantea algunas preguntas interesantes"
- Percepción visual: "Los jugadores están tan acostumbrados al tablero de tres en raya 'vertical' que un giro puede cambiar ligeramente la forma en que escanean el campo de juego en busca de amenazas y oportunidades".
- Simetría: "Matemáticamente, girar el tablero 90 grados no cambia el conjunto de posibles ganancias; sigue siendo el mismo juego en términos de resultados. Pero psicológicamente, las sensaciones pueden ser diferentes".
- ¿Cambio de estrategia?: "Dado que el centro sigue siendo el centro, sigue siendo el movimiento de debut más fuerte. Pero los jugadores pueden evaluar mal los movimientos 'borde-esquina' cuando cambia la orientación del campo".
Gary siguió haciendo preguntas:
- "¿El giro impide que la gente juegue bien?"
- GPT 5.0: "Esta es una gran pregunta, y aborda la diferencia entre la teoría de juegos y la psicología humana".
Según GPT-5, desde el punto de vista de la estrategia pura, girar el tablero no cambia nada; esta es una respuesta correcta, pero luego la IA comenzó a divagar.
Para las personas (según GPT-5) es diferente: la rotación "interrumpe el reconocimiento de patrones arraigado y aumenta el esfuerzo mental necesario para identificar amenazas y oportunidades".
Entre sus argumentos:
- Reconocimiento de patrones: "La mayoría de nosotros [los humanos] hemos desarrollado hábitos visuales persistentes al ver tableros de tres en raya en posición vertical desde la infancia. Girar el tablero interrumpe estos hábitos. Es posible que no veamos amenazas diagonales o que no notemos una línea que se está formando porque nuestro cerebro no está configurado para esa perspectiva".
- Carga cognitiva: "En lugar de reconocer instantáneamente las interconexiones 'esquina, centro, borde', los jugadores necesitan un paso mental adicional para orientarse [en el espacio]. Esta pequeña pérdida aumenta la probabilidad de errores".
- Asimetría: "Un giro de 90 grados mantiene la simetría del tablero, pero si alguien es diestro o zurdo, su escaneo visual puede favorecer una orientación sobre otra".
Luego, Gary propuso a GPT-5 responder a la pregunta: "Por favor, evalúe qué giro de 90 grados a la derecha, 90 a la izquierda o 180 sería el más confuso para los jugadores humanos".
Al final, en sus razonamientos, GPT-5 llegó a la propuesta de "¿debería dibujarle tableros de tres en raya girados con etiquetas de posición [...] para que pueda ver cómo afecta cada transformación al reconocimiento?".
Y al final, GPT-5 generó la siguiente imagen: contiene errores gramaticales y cuadrículas vacías, es decir, la IA falló mucho:
Gary concluyó su material con la siguiente declaración:
"Dicen que los perros a menudo se parecen a sus dueños. Chat GPT se parece mucho a Sam Altman [director de OpenAI]: siempre seguro de sí mismo, pero a menudo equivocado".