Volver al repositorio MIT
7. Seguridad, Fallos y Limitaciones del Sistema de IA2 - Post-despliegue

Daño a infraestructura crítica

La integración de sistemas de inteligencia artificial (IA) en infraestructuras críticas —como las de transporte o los sistemas de suministro de energía— conlleva un riesgo de daño sustancial ante cualquier fallo o funcionamiento erróneo. El incremento de dispositivos del Internet de las Cosas (IoT) y la creciente interconexión de sistemas ciberfísicos exacerban notablemente esta vulnerabilidad.

Fuente: MIT AI Risk Repositorymit1046

ENTIDAD

2 - IA

INTENCIÓN

2 - Involuntario

TIEMPO

2 - Post-despliegue

ID del riesgo

mit1046

Linea de dominio

7. Seguridad, Fallos y Limitaciones del Sistema de IA

375 riesgos mapeados

7.3 > Falta de capacidad o robustez

Estrategia de mitigacion

Estrategias de Mitigación del Riesgo de Daño a Infraestructura Crítica por Sistemas de IA En mi rol de experto en Gobernanza y Seguridad de la IA, propongo las siguientes acciones de mitigación, jerarquizadas por su impacto preventivo y correctivo, para abordar el riesgo de daño sustancial en infraestructura crítica derivado de fallos o mal funcionamiento de sistemas de inteligencia artificial integrados:1. **Prioridad 1: Implementación de Marcos de Gobernanza y Seguridad de la IA de Alto Riesgo.** * **Acción:** Establecer un riguroso marco de gestión de riesgos de IA (AI RMF) que exija la evaluación continua de la robustez, precisión y ciberseguridad de los modelos de IA antes y después del despliegue. * **Justificación:** El diseño de los sistemas de IA de alto riesgo debe incorporar *seguridad por diseño* (Safety by Design), incluyendo la trazabilidad algorítmica, pruebas de adversidad (Adversarial Testing) y mecanismos de supervisión humana efectiva, cumpliendo con los requisitos de la normativa emergente para sistemas que impactan funciones vitales. 2. **Prioridad 2: Fortalecimiento Holístico de la Resiliencia de Sistemas Ciberfísicos (OT/ICS).** * **Acción:** Reforzar la arquitectura de seguridad de los sistemas de tecnología operativa (OT) e Internet de las Cosas (IoT) integrados en la infraestructura crítica. * **Justificación:** Esto implica la segmentación estricta de la red para aislar los sistemas ciberfísicos (ICS/SCADA) de las redes de TI, la implementación de controles de acceso de mínimo privilegio, el uso obligatorio de cifrado para la transferencia de datos y la activación de sistemas de redundancia operativa para garantizar la continuidad del servicio ante un fallo o interrupción. 3. **Prioridad 3: Desarrollo y Prueba de Planes de Contingencia y Recuperación ante Desastres.** * **Acción:** Elaborar planes de contingencia detallados que aborden escenarios de fallo catastrófico de la IA o de ciberataque a infraestructura crítica, y someterlos a ejercicios de ciberseguridad (inter)nacionales periódicos. * **Justificación:** La planificación de la recuperación garantiza una respuesta rápida y coordinada, minimizando el tiempo de inactividad operativa. Es imperativo establecer redes de resolución de crisis y asegurar que las organizaciones dispongan de los recursos y procedimientos necesarios para restaurar rápidamente los servicios esenciales.