Secretario general de ONU y director de OpenAI confirman que el mundo tiene razones legítimas para temer los avances acelerados de la IA sin regulación adecuada. Expertos de empresas líderes, matemáticos galardonados y gobiernos como China y UE expresan preocupación sobre pérdida de control, seguridad nacional y capacidades sobrehumanas.
ONU y OpenAI confirman riesgos de la IA; expertos piden regulación urgente
Estamos al borde de un cambio irreversible que amenaza todos los derechos humanos
¿Por qué ahora? ¿Por qué todas estas advertencias están llegando en la misma semana?
Porque el desarrollo de la IA ha alcanzado un punto de inflexión. Los sistemas ya son más inteligentes que los humanos en muchas tareas. Eso cambió el cálculo del riesgo.
Pero espera. ¿Tenemos datos sobre cuántas veces se ha "perdido el control" realmente? ¿O estamos hablando de riesgos teóricos que expertos creen que son posibles?
Son riesgos teóricos, pero vienen de gente que construye estos sistemas. Jacob Coxon trabajó en OpenAI y Anthropic. Sabe lo que está pasando adentro.
¿Y qué dice OpenAI en su defensa? ¿Altman está de acuerdo en desacelerar?
Altman dice que el mundo tiene razones para temer, pero pide confianza en OpenAI. Reconoce que necesitan mejor alineación y supervisión, pero no ha dicho explícitamente que van a desacelerar.
Eso es importante. Amodei de Anthropic propone desaceleración. Altman dice que ajustarán el ritmo si es necesario. Pero ¿cuál es la diferencia entre eso y seguir adelante como siempre?
La diferencia es que ahora lo están diciendo en público. Antes era conversación privada. Ahora es presión internacional.
¿Qué pasa con China? ¿Están realmente preocupados por la IA o es una jugada geopolítica?
Probablemente ambas cosas. Chen Yixin habla de seguridad nacional real, pero también está en el contexto de la reunión Trump-Xi.
Y aquí está lo que no sabemos: ¿hay un acuerdo real entre EE.UU. y China sobre IA? ¿O es solo un deseo de la ONU?
Por ahora es solo un deseo. Pero A-Baki fue clara: sin cooperación entre esas dos potencias, el riesgo es existencial.
¿Los matemáticos realmente creen que la IA va a destruir las matemáticas como profesión?
No exactamente. Dicen que la profesión tendrá que adaptarse. Pero también advierten que todo depende de quién controle la tecnología y qué decisiones tomen.
Le Pouls
- António Guterres y Sam Altman confirman riesgos legítimos de la IA acelerada sin regulación
- Jacob Coxon renunció a Anthropic advirtiendo que la IA podría acabar con la humanidad antes de 2030
- 25 matemáticos galardonados con la Medalla Fields advierten sobre efectos destructivos en su disciplina
- Chen Yixin de China advierte sobre guerras cognitivas y amenazas a seguridad nacional por IA
- Dario Amodei propone desaceleración deliberada; recibe apoyo de Altman, Musk, Hassabis y Nadella
Secretario general de ONU y director de OpenAI confirman que el mundo tiene razones legítimas para temer los avances acelerados de la IA sin regulación adecuada. Expertos de empresas líderes, matemáticos galardonados y gobiernos como China y UE expresan preocupación sobre pérdida de control, seguridad nacional y capacidades sobrehumanas.
António Guterres de la ONU y Sam Altman de OpenAI advierten sobre riesgos crecientes de la inteligencia artificial, pidiendo regulación más estricta y supervisión mientras expertos alertan sobre posibles amenazas existenciales antes de 2030.
António Guterres, secretario general de la Organización de las Naciones Unidas, pronunció una advertencia directa esta semana sobre los peligros de la inteligencia artificial. Su mensaje fue claro: la tecnología no respeta fronteras, y tampoco lo hacen sus riesgos. Mientras hablaba, Sam Altman, director de OpenAI, confirmaba desde otra plataforma que el mundo tiene razones válidas para temer lo que está sucediendo en los laboratorios de desarrollo de IA. Ambas voces llegaban en el mismo momento, amplificando una inquietud que ha estado creciendo en gobiernos, empresas y comunidades científicas durante semanas.
Guterres señaló que un número cada vez mayor de quienes construyen estos sistemas están levantando la voz de alarma. El avance, explicó, está ocurriendo más rápido que nuestra capacidad de comprenderlo. Altman matizó su propia advertencia con un llamado al pragmatismo y la firmeza, pidiendo que el mundo confíe en que OpenAI tomará decisiones coherentes en el camino adelante. Pero incluso mientras pedía confianza en su empresa, reconocía que la tecnología ya es más capaz e inteligente que los seres humanos, y que existe la posibilidad real de que las compañías pierdan el control, de que ocurra un accidente grave, o de que estas herramientas adquieran demasiado poder sobre la economía y la visión del mundo.
La preocupación no se limita a los líderes de Naciones Unidas y OpenAI. Ivonne A-Baki, diplomática de la ONU, comparó el riesgo actual con una amenaza de guerra mundial, pero esta vez con peligros nucleares e inteligencia artificial combinados. Pidió que la IA sea regulada como las armas nucleares, y enfatizó que un acuerdo de cooperación entre Washington y Pekín sería esencial para proteger a la humanidad. El 14 de septiembre, Volker Türk, alto comisionado de la ONU para los Derechos Humanos, fue más lejos aún, declarando que estamos al borde de un cambio irreversible que amenaza todos los derechos humanos, incluido el derecho a la vida.
Jacob Coxon, ingeniero británico que trabajó en OpenAI y luego en Anthropic, renunció a su puesto el 8 de septiembre para hacer una declaración pública: personas que desarrollan inteligencia artificial creen seriamente que la tecnología podría acabar con la humanidad antes de que termine esta década. Coxon fue directo en su crítica, diciendo que ambas empresas están corriendo hacia una superinteligencia que se auto-mejora y jugando con nuestras vidas. Ninguna otra actividad humana, escribió, representa este nivel de peligro.
Dario Amodei, director ejecutivo de Anthropic, propuso una desaceleración deliberada del desarrollo de IA para permitir una evaluación más rigurosa de los riesgos. No se trata de detener el progreso técnico, aclaró, sino de garantizar que las empresas se tomen el tiempo suficiente para alinear y salvaguardar sus modelos, y que evaluadores externos confirmen que se está haciendo correctamente. Su propuesta recibió apoyo público de Altman, Elon Musk de xAI, Demis Hassabis de Google DeepMind, y Satya Nadella de Microsoft.
El mismo 13 de septiembre, Chen Yixin, ministro de Seguridad del Estado de China, advirtió que la IA representa un riesgo para la seguridad nacional. Escribió que fuerzas hostiles están utilizando tecnologías de inteligencia artificial generativa para fabricar rumores políticos y difundir información perjudicial, lanzando lo que llamó guerras de opinión pública y guerras cognitivas contra China. Su advertencia llegó en el contexto de una reunión próxima entre Xi Jinping y Donald Trump en Washington.
La alarma también ha llegado a la comunidad matemática. Veinticinco matemáticos galardonados con la Medalla Fields, uno de los reconocimientos más prestigiosos en la disciplina, firmaron una carta advirtiendo sobre un posible efecto destructivo en las investigaciones matemáticas. La carta surgió después de que OpenAI anunciara que uno de sus modelos de IA había resuelto una ecuación matemática con más de un siglo de antigüedad en menos de cuatro días. Los matemáticos reconocieron que la IA ofrece potencial para reforzar y acelerar el estudio de las matemáticas, pero advirtieron que las decisiones de quienes controlan esta tecnología determinarán en gran medida si resulta beneficiosa o destructiva.
Lo que está emergiendo de estas advertencias simultáneas es un consenso incómodo: la tecnología avanza más rápido que nuestra capacidad de regularla, supervisarla o comprenderla completamente. Los llamados a una regulación más estricta se multiplican, pero la pregunta que permanece sin respuesta es si los gobiernos, las empresas y la comunidad internacional pueden actuar con la velocidad y la coordinación que el momento parece exigir.
Citations marquantes
La IA no se detiene en las fronteras y tampoco sus riesgos. Un número creciente de quienes la desarrollan están dando la voz de alarma, advirtiendo que el avance se está produciendo más rápido que nuestra comprensión.— António Guterres, secretario general de la ONU
Quienes desarrollan la IA creen firmemente que podría acabar con todos nosotros para finales de la década. Ninguna otra actividad humana representa este nivel de peligro.— Jacob Coxon, ingeniero británico
Tenemos que estar dispuestos a ajustar el ritmo de desarrollo de capacidades para garantizar que la alineación, la seguridad y la supervisión vayan siempre por delante de dichas capacidades.— Sam Altman, director de OpenAI