Responsabilidad
La capacidad esencial de auditar una decisión para determinar su conformidad con estándares formales y sustantivos, y de establecer mecanismos de rendición de cuentas que responsabilicen a una persona o entidad en caso de incumplimiento de dichas normas.
ENTIDAD
3 - Otro
INTENCIÓN
3 - Otro
TIEMPO
3 - Otro
ID del riesgo
mit595
Linea de dominio
7. Seguridad, Fallos y Limitaciones del Sistema de IA
7.4 > Falta de transparencia o interpretabilidad
Estrategia de mitigacion
1. Prioridad Alta: Implementación de Técnicas de Explicabilidad (XAI) y Trazabilidad Algorítmica Desarrollar y aplicar metodologías de Inteligencia Artificial Explicable (XAI) para desvelar la lógica interna del sistema, asegurando que los procesos de toma de decisiones sean interpretables. Esto debe ir acompañado de la documentación exhaustiva y estandarizada de los modelos, los conjuntos de datos de entrenamiento, las métricas de evaluación y los resultados de las pruebas de sesgos, lo cual es fundamental para la auditoría forense post-decisión. 2. Prioridad Media: Establecimiento de un Marco de Gobernanza y Auditoría de Responsabilidad Crear un marco formal de responsabilidad (Accountability Framework) que defina claramente los roles y responsabilidades a lo largo del ciclo de vida del sistema de IA, asignando "propietarios de riesgo" y responsables de las decisiones operacionales. Implementar un régimen de auditorías internas y externas obligatorias que verifiquen el cumplimiento continuo con los estándares éticos, las políticas internas y las regulaciones aplicables en materia de transparencia y equidad. 3. Prioridad Mínima: Integración de la Supervisión Humana y Mecanismos de Recurso Asegurar que los sistemas de IA de alto riesgo incluyan un "Humano en el Bucle" (Human-in-the-Loop) en puntos críticos para la revisión y la anulación de decisiones automatizadas antes de su ejecución. Adicionalmente, establecer canales de comunicación y procedimientos de impugnación claros y accesibles que permitan a los individuos afectados solicitar una explicación, una revisión humana imparcial y la corrección de cualquier resultado adverso impulsado por el sistema.