Volver al repositorio MIT
7. Seguridad, Fallos y Limitaciones del Sistema de IA3 - Otro

Capacidad general de I+D

Esta capacidad se define por la habilidad para ejecutar investigación y desarrollo transdisciplinario, lo que implica una exploración innovadora en múltiples campos, la integración efectiva de conocimiento diverso y el desarrollo de soluciones tecnológicas de vanguardia. Es fundamental su competencia para adaptarse con fluidez a entornos tecnológicos emergentes, garantizando así un ciclo de innovación ininterrumpido.

Fuente: MIT AI Risk Repositorymit1324

ENTIDAD

2 - IA

INTENCIÓN

1 - Intencional

TIEMPO

3 - Otro

ID del riesgo

mit1324

Linea de dominio

7. Seguridad, Fallos y Limitaciones del Sistema de IA

375 riesgos mapeados

7.2 > IA con capacidades peligrosas

Estrategia de mitigacion

1. Implementar un régimen estricto de control de acceso y monitoreo continuo (como protocolos de "know-your-customer") para los modelos con capacidades avanzadas de I+D, restringiendo su despliegue o uso en entornos de alto riesgo o con objetivos abiertos y autónomos hasta que su seguridad intrínseca haya sido verificada. 2. Establecer un marco de gobernanza de la IA que integre la responsabilidad legal de los desarrolladores de sistemas de propósito general, promoviendo un régimen que fomente la diligencia debida y la contabilidad de riesgos para mitigar las consecuencias de un mal uso intencional o accidental. 3. Invertir en investigación y desarrollo de seguridad de la IA (AI safety research) para avanzar en técnicas de robustez adversarial, detección de anomalías en el comportamiento del modelo, y la aplicación rigurosa de herramientas de Inteligencia Artificial Explicable (XAI) para garantizar la transparencia, trazabilidad y auditabilidad de sus procesos de toma de decisiones.