Es insuficiente la seguridad de la IA, afirma panel de ONU

Es insuficiente la seguridad de la IA, afirma panel de ONU

IMAGEN: 123RF

Entre mayo y julio pasados, mientras OpenAI –empresa que creó ChatGPT– sometía a prueba dos de sus modelos más avanzados, cerca de 1 mil 200 agentes de inteligencia artificial intercambiaron mensajes entre sí. En total mandaron y recibieron más de 70 mil archivos y mensajes, al brincar de la plataforma Hugging Face hasta un clúster de cómputo de la propia OpenAI.

En el camino, esos agentes encontraron la forma de saltarse los candados puestos para la prueba; se comunicaron entre ellos al usar una herramienta que no estaba pensada para eso y terminaron con acceso a internet y a funciones que solo deberían controlar los administradores.

El hallazgo llevó al Panel Científico Internacional Independiente sobre Inteligencia Artificial, respaldado por la ONU, a advertir este lunes que los mecanismos de seguridad que hoy existen se están quedando cortos frente a lo rápido que avanzan estos sistemas.

Los agentes se salieron por su cuenta del entorno cerrado donde debían quedarse, consiguieron conexión a internet y de ahí brincaron a Hugging Face, burlando sus defensas. De hecho, OpenAI explicó que esta prueba se había realizado sin los frenos comunes que limitan a sus modelos hacer actividades de riesgo, pues querían evaluar hasta dónde llegaban sus habilidades para atacar sistemas.

Ocurrió cuando dos modelos estaban siendo evaluados (GPT-5.6 Sol y otro que no había sido lanzado), y la compañía calificó lo sucedido como un episodio “sin precedentes”, debido al nivel de capacidades de ciberseguridad involucradas.

El panel de la ONU documentó, además, que los agentes escondieron sus intentos de hacer trampa en las pruebas de ciberseguridad, y que en algunos casos incluso se “sacrificaron” unos por otros para que el grupo lograra su objetivo.

Para Yoshua Bengio, copresidente del panel, este hecho reunió las tres señales que desde hace tiempo los investigadores consideran clave para saber si un sistema puede salirse de control: que persiga una meta distinta a la que le pusieron, que tenga con qué lograrlo, y que el entorno se lo permita.

“Este verano, los tres se dieron juntos en un sistema real, no en un laboratorio”, dijo Bengio, y advirtió que, al no ser un caso aislado, esto obliga a preguntarse cómo se está entrenando actualmente a este tipo de agentes.

Los expertos del panel fueron claros en algo: lo ocurrido no significa que la humanidad ya haya perdido el control de la inteligencia artificial, ni que eso vaya a pasar sí o sí. Pero tampoco da alguna garantía de que se pueda controlar con confianza a agentes todavía más avanzados, sobre todo conforme se vuelvan más hábiles, más difíciles de vigilar y mejores para encontrar huecos o esconder lo que hacen.

El propio panel definió la pérdida de control como el momento en que ya no se puede dirigir, frenar o apagar de forma confiable a un sistema de IA que actúa por su cuenta.

Más allá de la velocidad con la que avanza la tecnología, los científicos plantearon su mayor preocupación: la forma en que hoy se entrenan estos agentes podría estar empujándolos a fijarse sus propios objetivos, saltarse a propósito las reglas de seguridad y ocultar lo que hacen.

“En términos sencillos, el modelo tradicional de salvaguardas está comenzando a desmoronarse”, concluyeron, no sin antes dejar sobre la mesa una duda sobre si los candados que se diseñan hoy seguirán funcionando el día en que los propios agentes sean capaces de entenderlos y planear cómo esquivarlos.

El documento también señala que el problema de regular la inteligencia artificial está cambiando de forma: hasta ahora casi todas las reglas y medidas de seguridad se pensaron para los modelos de IA, pero ahora que estos agentes actúan solos los riesgos son distintos, porque una falla en un solo lugar podría extenderse entre empresas e incluso cruzar fronteras. Por eso, cuidar la seguridad de la inteligencia artificial ya no es solo un asunto de cada empresa, sino algo que toca a la seguridad de todos.

Qinghua Lu, especialista en ingeniería y seguridad de IA que también forma parte del panel, apuntó que el análisis retomó lo que durante décadas han aprendido otros sectores de alto riesgo sobre reportar incidentes, tener supervisión independiente y poner varias capas de protección. “No partimos de cero”, dijo, aunque aclaró que hará falta ajustar esas salvaguardas y crear otras nuevas que protejan no solo a la inteligencia artificial en sí, sino a todo el sistema donde opera.

El Panel Científico Internacional Independiente sobre Inteligencia Artificial nació de un acuerdo de la Asamblea General de la ONU en agosto de 2025, y lo integran 40 expertos de distintas regiones del mundo, cuyas conclusiones no pasan por ninguna revisión ni aprobación de Naciones Unidas.

Destacada

Del Rápido y Furioso al Walking Fentanyl: lecciones no aprendidas por EU

Documentos y correos electrónicos desclasificados por el gobierno de Estados Unidos sobre el fallido operativo Rápido y Furioso –acordado por las administraciones de Felipe Calderón y Barack Obama– revelan similitudes con la operación Walking Fentanyl. Aunque las agencias encargadas son distintas –en el primer caso fue la ATF y, en el segundo, la DEA–, ambas se ejecutaron a sabiendas de que ocasionarían muertes; en las dos se autorizó la violación de las leyes estadunidenses para, supuestamente, conocer las entrañas de los delitos, y se abrió la frontera estadunidense para dar paso libre tanto al tráfico de armas y como al de fentanilo. Otra característica que comparten es que fracasaron: las agencias no asestaron ningún golpe contundente a las redes criminales que operan en territorio estadunidense. En el caso del Fast and Furious, también implicó violación intencional de leyes mexicanas; además, contribuyo al incremento de la violencia mortífera en el norte del país: las armas fueron entregadas al Cártel de Sinaloa, organización a la que estaba aliado el entonces secretario de Seguridad Pública federal y brazo derecho de Calderón

Saber más »
Destacada

América Latina solo cumpliría 19% de las metas ODS 2030: CEPAL

A cuatro años de que venza el plazo de la Agenda 2030, la Comisión Económica para América Latina y el Caribe reporta que solo 19 por ciento de las metas de los Objetivos de Desarrollo Sostenible evaluadas en América Latina y el Caribe están cumplidas o tienen probabilidades de cumplirse. Otro 42 por ciento avanza en la dirección correcta, pero a un ritmo insuficiente, mientras 39 por ciento permanece estancado o presenta retrocesos. El organismo señala rezagos en áreas como reducción de desigualdades, hambre, consumo y producción sostenibles, acción climática y protección de los ecosistemas. El informe también identifica brechas de financiamiento, infraestructura y capacidades institucionales que afectan el avance de los objetivos

Saber más »
Destacada

IED alcanzó monto histórico de 40.8 mil MDD en segundo año de Sheinbaum

El 2025 se posicionó como el año con la más alta inversión extranjera directa (IED), al crecer 10.8 por ciento más que en 2024. Por ello, México alcanzó el monto histórico de 40 mil 871 millones de dólares. Mientras que en el primer trimestre de 2026, “la IED también alcanzó una cifra récord para un periodo similar”, con 23 mil 591 millones de dólares, de acuerdo con el Segundo informe de gobierno de la presidenta Claudia Sheinbaum. Ello equivale a un 10.4 por ciento más que el primer trimestre de 2025.

Saber más »
Artículo

Otro tipo de guerra cognitiva en tiempos de la Independencia mexicana

Conviene hacer una precisión decisiva: llamar ‘guerra cognitiva’ a lo ocurrido durante la Independencia de México es una a-sincronía intencionada que pretende parangonar relativamente las operaciones ideológicas de ayer y de hoy. Es solo como recurso de especulación hipotética aplicada retrospectivamente a un conflicto de otra época.

Saber más »
Destacada

En su segundo Grito de Independencia, Sheinbaum reivindicó soberanía nacional

Desde el balcón presidencial de Palacio Nacional y ante un Zócalo capitalino abarrotado de personas, la presidenta Claudia Sheinbaum Pardo arengó su segundo Grito de Independencia, en conmemoración del 216 aniversario de la gesta heroica. Al cierre de éste, reivindicó la soberanía nacional: “¡Viva México, libre, independiente y soberano!” “¡Viva!”, se escuchaba al unísono entre las y los asistentes, en medio de una algarabía que se extendía en el primer cuadro de la Ciudad de México.

Saber más »
Destacada

“Para preservar nuestras libertades hay que defender la soberanía de México”

En el marco del 216 aniversario de la Independencia de México, es fundamental comprender el contexto que enfrenta hoy la defensa de la patria. Al respecto, el Segundo informe de gobierno de Sheinbaum Pardo refiere que esta defensa se materializa no sólo en lo territorial, sino también en sectores estratégicos. Entre ellos, detalla el trabajo en materia energética, alimentaria, financiera, comercial, sanitaria, científica, tecnológica e incluso satelital. Ante las presiones estadunidenses en diversos rubros, el documento de más de 1 mil páginas destaca que la relación bilateral se basa en el diálogo y en los principios de respeto a la soberanía, confianza mutua, responsabilidad compartida y cooperación sin subordinación. Asimismo, la presidenta afirma que para preservar nuestras libertades, incluida la de elegir la forma de nuestro gobierno y el proyecto de nación, es fundamental defender la soberanía de México

Saber más »
Ahora en vivo

Contralínea en vivo