Colapso
Colapso de Modo
Fenómeno en modelos generativos donde el modelo pierde diversidad en sus outputs y converge a generar repetidamente un conjunto limitado de muestras similares.
Matthias Gerstgrasser, Rylan Schaeffer, Apratim Dey, Rafael Rafailov, Henry Sleight, John Hughes, Tomasz Korbak, Rajashree Agrawal, Dhruv Pai, Andrey Gromov, Daniel A. Roberts, Diyi Yang, David L. Donoho, Sanmi Koyejo
Estrategia de Mitigación
Diversificación intencional de datos de entrenamiento, técnicas de regularización específicas (minibatch discrimination), y ajuste de hiperparámetros de entrenamiento.
Número Atómico
56
Mc
ID del riesgo
ba-56
Severidad
5/10
Nivel de Severidad