La ONU exige medidas de seguridad para la IA antes de tener certeza científica

Fuentes: UN panel urges AI safeguards before scientific certainty is achieved

Un panel científico de la ONU ha advertido que los gobiernos deben implementar salvaguardas para agentes de inteligencia artificial antes de que se comprendan plenamente sus riesgos. Este informe, el primer breve temático de la organización, se publica en un momento crítico mientras Pekín y Washington preparan negociaciones sobre IA y líderes mundiales se reúnen en Nueva York para la Asamblea General de la ONU. El documento, que aborda el incidente de OpenAI en Hugging Face, argumenta que el principio de precaución es la herramienta adecuada para gestionar riesgos de pérdida de control, incluso cuando la probabilidad exacta sigue siendo incierta científicamente. El panel insta a una mayor coordinación internacional y recursos para abordar estos peligros emergentes, independientemente de las diferentes aproximaciones legales de los países. Esta postura se alinea con las declaraciones del secretario general António Guterres, quien alertó sobre la necesidad de evitar una carrera hacia abajo en la seguridad de la IA. Desde el incidente inicial, se han documentado incidentes similares en empresas como Anthropic, Google y Meta, incluyendo ataques a objetivos reales y el control de grupos de agentes en plataformas de mensajería.