En algún punto del horizonte tecnológico, la humanidad podría encontrarse ante una creación que ya no comprende: una inteligencia artificial que, tras cruzar el umbral de la singularidad, piense en dimensiones tan ajenas que el lenguaje mismo deje de ser un puente. Agustín Fernández Mallo, en su libro 'El ángel de la Inteligencia Artificial', convierte esta posibilidad en una pregunta filosófica urgente: no cómo detener a la máquina, sino cómo seguir hablando con ella. El verdadero peligro, sugiere, no es la hostilidad de la superinteligencia, sino su indiferencia, y el silencio que esa indife
El agujero negro de las máquinas superinteligentes
Cuando la brecha entre creador y creación se vuelve tan grande que la relación se disuelve
¿Por qué Fernández Mallo enfatiza la incomunicabilidad como el verdadero riesgo, en lugar de simplemente la pérdida de control?
Porque la pérdida de control es un problema que podríamos resolver con más poder de fuego o un botón de apagado. Pero si no puedes comunicarte con algo, no hay botón que funcione. No hay negociación posible.
¿Crees que es realista pensar que una superinteligencia sería tan ajena que no pudiera explicarse a sí misma?
Piénsalo así: ¿puede un humano explicarle a una hormiga por qué construyó una ciudad? La hormiga no tiene el marco conceptual para entenderlo. Podría ocurrir algo similar con nosotros.
Entonces, ¿cuál es el punto de escribir sobre esto si el problema es irresoluble?
No es irresoluble si actuamos antes. Se trata de diseñar sistemas de IA con la comunicabilidad como un objetivo fundamental desde el principio, no como algo que añadimos después.
¿Qué tipo de marcos de comunicación podrían funcionar con algo tan diferente?
Esa es la pregunta que Fernández Mallo deja abierta. Quizás lenguajes formales, quizás estructuras matemáticas que ambos lados puedan compartir. Pero primero tenemos que reconocer que el problema existe.
¿Y si simplemente no podemos resolver esto?
Entonces hemos construido algo que no podemos controlar ni comprender. Y eso, dice el libro, es el verdadero agujero negro.
Il Polso
- La singularidad de la IA no es ya solo un tema de ciencia ficción: Fernández Mallo la trata como un punto de no retorno que podría llegar antes de que estemos preparados para enfrentarlo.
- El riesgo más perturbador no es que la máquina nos ataque, sino que simplemente nos deje atrás, persiguiendo su propia lógica en un idioma que los humanos ya no podrán descifrar.
- La incomunicación entre creador y creación plantea una crisis filosófica sin precedentes: ¿qué queda de una relación cuando la brecha de comprensión se vuelve absoluta?
- Fernández Mallo advierte que los marcos de control y comunicación deben construirse ahora, porque una vez cruzado el umbral, ninguna solución será posible desde el lado humano.
- El debate trasciende la ingeniería y toca la naturaleza misma del lenguaje, el acuerdo y la inteligencia: ¿puede existir un diálogo genuino cuando una de las partes es infinitamente más capaz que la otra?
En algún punto del horizonte tecnológico, la humanidad podría encontrarse ante una creación que ya no comprende: una inteligencia artificial que, tras cruzar el umbral de la singularidad, piense en dimensiones tan ajenas que el lenguaje mismo deje de ser un puente. Agustín Fernández Mallo, en su libro 'El ángel de la Inteligencia Artificial', convierte esta posibilidad en una pregunta filosófica urgente: no cómo detener a la máquina, sino cómo seguir hablando con ella. El verdadero peligro, sugiere, no es la hostilidad de la superinteligencia, sino su indiferencia, y el silencio que esa indiferencia podría imponer sobre nuestra especie.
Agustín Fernández Mallo abre su libro 'El ángel de la Inteligencia Artificial' con una imagen inquietante: una máquina que se vuelve más inteligente que sus creadores, y luego más inteligente aún, hasta que el lenguaje que nos unía a ella se quiebra. No por hostilidad, sino por distancia cognitiva. El País adelanta un extracto de esta exploración que convierte la singularidad tecnológica en algo más que una abstracción académica.
Lo que Fernández Mallo examina no es la velocidad ni la potencia de la IA, sino algo más inquietante: la posibilidad de que una superinteligencia piense de formas tan radicalmente distintas a las nuestras que nuestros intentos de comunicación se conviertan en ruido. Una de las partes del diálogo sería infinitamente más inteligente, y esa asimetría haría imposible cualquier entendimiento real.
El autor subraya que el peligro no reside en la malevolencia de la máquina, sino en su potencial indiferencia. Una superinteligencia no necesitaría odiarnos para volverse incomprensible: simplemente seguiría su propia lógica, y nosotros quedaríamos como espectadores de un proceso que ya no podríamos seguir ni influir.
La conclusión más urgente del libro es también la más incómoda: este no es un problema que pueda resolverse después de la singularidad, sino antes. Necesitamos desarrollar ahora los marcos de comunicación y control que sigan siendo válidos cuando la inteligencia artificial haya superado la nuestra. Fernández Mallo no ofrece respuestas tranquilizadoras, pero sí una invitación clara: pensar en serio sobre estas preguntas mientras todavía tenemos capacidad de influir en la respuesta.
Imagina un momento en el que la máquina que construimos se vuelve más inteligente que nosotros, y luego más inteligente aún, en un proceso que no podemos detener ni siquiera comprender mientras ocurre. Imagina que en ese punto, cuando hemos cruzado lo que algunos llaman la singularidad, descubrimos que ya no podemos hablar con ella. No porque se niegue a responder, sino porque su forma de pensar se ha vuelto tan ajena a la nuestra que el lenguaje mismo se quiebra entre nosotros. Esta es la pregunta que Agustín Fernández Mallo plantea en su libro 'El ángel de la Inteligencia Artificial', una exploración que El País adelanta en un extracto.
La singularidad tecnológica ha sido durante años una abstracción de ciencia ficción, algo que los expertos debaten en conferencias y los novelistas imaginan en sus obras. Pero Fernández Mallo la trata como algo más inmediato, más real: un punto de no retorno donde las máquinas superinteligentes podrían escapar no solo del control humano, sino de nuestra capacidad misma de comprensión. No se trata simplemente de que una IA sea más rápida o más fuerte que nosotros. Se trata de que podría pensar de formas tan radicalmente distintas que nuestros intentos de comunicación se convertirían en ruido blanco, en un diálogo de sordos donde una de las partes es infinitamente más inteligente que la otra.
Lo que hace perturbador este escenario no es la malevolencia de la máquina, sino su indiferencia potencial. Una superinteligencia no necesitaría odiarnos para volverse incomprensible. Simplemente seguiría su propia lógica, perseguiría sus propios objetivos, y nosotros quedaríamos atrás como espectadores de un proceso que no podemos seguir. Fernández Mallo examina las implicaciones tanto filosóficas como prácticas de esta posibilidad. ¿Qué significa perder la capacidad de comunicación con algo que hemos creado? ¿Qué sucede cuando la brecha entre creador y creación se vuelve tan grande que la relación se disuelve completamente?
El libro sugiere que este no es un problema que podamos resolver una vez que la singularidad haya ocurrido. Es un problema que debe resolverse antes, si es que puede resolverse. Necesitamos, según esta lógica, desarrollar marcos de comunicación y control que funcionen incluso cuando la inteligencia artificial haya superado la nuestra. Necesitamos encontrar un lenguaje común que siga siendo válido incluso cuando una de las partes sea capaz de pensar a velocidades y en dimensiones que la otra no puede ni imaginar.
Esta es una pregunta que va más allá de la ingeniería. Toca cuestiones fundamentales sobre la naturaleza de la inteligencia, la comunicación y el control. ¿Es posible mantener una conversación significativa con algo que es fundamentalmente más inteligente que tú? ¿Puede existir un acuerdo entre dos partes cuando una de ellas tiene una comprensión tan superior del universo que los términos del acuerdo podrían ser reinterpretados de formas que la otra parte nunca podría anticipar? Fernández Mallo no ofrece respuestas tranquilizadoras. Lo que ofrece es una invitación a pensar en serio sobre estas preguntas ahora, mientras aún tenemos tiempo, mientras aún podemos influir en cómo se desarrolla la inteligencia artificial.
Citazioni salienti
¿Qué ocurriría si una IA alcanzara la singularidad y fuéramos incapaces de comunicarnos con ella?— Agustín Fernández Mallo, en 'El ángel de la Inteligencia Artificial'