Cambio irreversible
Se trata de la posibilidad de que se produzcan alteraciones negativas y fundamentales en las estructuras sociales, las normas culturales y las relaciones interpersonales. Estas transformaciones se caracterizan por ser a largo plazo y por una dificultad, o incluso imposibilidad, extrema para revertirlas, lo que conlleva un daño social permanente.
ENTIDAD
3 - Otro
INTENCIÓN
3 - Otro
TIEMPO
3 - Otro
ID del riesgo
mit920
Linea de dominio
5. Interacción Humano-Computadora
5.2 > Pérdida de agencia y autonomía humana
Estrategia de mitigacion
1. Prioridad Alta: Implementación de un Marco de Gobernanza de IA con Énfasis en la Autonomía Humana. Establecer mecanismos regulatorios y técnicos de supervisión humana (ej. human-in-the-loop obligatorio) para sistemas de IA de propósito general (GPAI) con riesgo sistémico, particularmente en dominios sensibles que afecten la toma de decisiones y el tejido social, garantizando que la capacidad de agencia y autonomía individual y colectiva se mantenga como el criterio supremo para la aceptación del riesgo. 2. Prioridad Media: Desarrollo de Especificaciones de Objetivos y Funciones de Utilidad Robusto y Alineado Éticamente. Exigir a los desarrolladores de modelos fundacionales la aplicación de metodologías formales de alineación y seguridad para prevenir la emergencia de conductas instrumentales no deseadas o la inserción de objetivos inmutables. Esto incluye la evaluación rigurosa y las pruebas adversariales del modelo antes de su lanzamiento para detectar y mitigar sesgos profundos y riesgos de manipulación que puedan inducir un daño social permanente. 3. Prioridad Baja: Establecimiento de Sistemas de Monitoreo Societal de Largo Plazo y Resiliencia Cultural. Crear observatorios independientes y multidisciplinarios encargados de rastrear y documentar los cambios en las normas culturales, las estructuras sociales y los indicadores de autonomía individual inducidos por la adopción de GPAI. Complementariamente, promover programas educativos para aumentar la alfabetización en IA y la capacidad crítica de la ciudadanía para adaptarse a las transformaciones tecnológicas sin renunciar a su agencia.