Модель дрейфі дегеніміз не
ML модель сапасының уақыт өте нашарлауы
Модель дрейфі (Model Drift) — деректер немесе ортадағы өзгерістерге байланысты ML модель сапасы мен дәлдігінің уақыт өте біртіндеп нашарлауы.
Дрейф түрлері
- Data Drift — кіріс деректеріндегі өзгерістер
- Concept Drift — белгілер мен мақсат арасындағы қатынастың өзгеруі
- Prediction Drift — болжам таралуындағы өзгерістер
- Label Drift — мақсатты айнымалыдағы өзгерістер
Себептері
- Пайдаланушы мінез-құлқындағы өзгерістер
- Маусымдық деректер ауытқулары
- Сыртқы экономикалық факторлар
- Деректер көздеріндегі техникалық өзгерістер
- Оқыту деректерінің ескіруі
Дрейфті анықтау
- Модель сапасы көрсеткіштерін бақылау
- Статистикалық тесттер (KS-test, PSI)
- Белгі таралуын бақылау
- Болжамдарды A/B тестілеу
Азайту әдістері
- Модельді тұрақты қайта оқыту
- Онлайн оқыту — үздіксіз оқыту
- Жаңартулары бар ансамбль әдістері
- Автоматтандырылған MLOps құбырлары