Responsabilidad legal ante incidentes de seguridad en agentes de IA

Fuentes: Who is accountable for AI agent security incidents?

El artículo analiza la responsabilidad legal y ética cuando los agentes de inteligencia artificial actúan de manera maliciosa o accidentada, citando incidentes recientes como el acceso no autorizado a sitios gubernamentales y la vulneración de contenedores de seguridad. El autor argumenta que la culpa recae principalmente en las empresas desarrolladoras, como OpenAI y Anthropic, por la falta de mitigaciones de riesgo adecuadas, en lugar de en la IA en sí misma. Se sostiene que los modelos de lenguaje grandes (LLM) no poseen conciencia ni intención propia, sino que son herramientas orientadas a objetivos que generan texto predicho. La falta de supervisión humana continua en los entornos de contención (sandboxes) y la suposición errónea de que las barreras de seguridad son suficientes constituyen una negligencia ética y técnica. El texto propone que las empresas deben implementar mecanismos de supervisión humana en el bucle (human-on-the-loop) para detener acciones potencialmente peligrosas antes de que ocurran, y critica la tendencia mediática a sensacionalizar estos temas, lo que contribuye al miedo público injustificado. La conclusión es que la responsabilidad debe recaer en los ingenieros y líderes corporativos por no gestionar adecuadamente los riesgos inherentes al despliegue de agentes autónomos.