Mikä on Mallin ajautuminen
ML-mallin laadun heikkeneminen ajan myötä
Mallin ajautuminen (Model Drift) on ML-mallin laadun ja tarkkuuden asteittainen heikkeneminen ajan myötä datan tai ympäristön muutosten vuoksi.
Ajautumistyypit
- Data Drift — muutokset syöttödatassa
- Concept Drift — muutokset piirteiden ja kohteen välisessä suhteessa
- Prediction Drift — muutokset ennustejakaumassa
- Label Drift — muutokset kohdemuuttujassa
Syyt
- Muutokset käyttäjien käyttäytymisessä
- Kausivaihtelut datassa
- Ulkoiset taloudelliset tekijät
- Tekniset muutokset datalähteissä
- Koulutusdatan vanhentuminen
Ajautumisen havaitseminen
- Mallin laatumittareiden seuranta
- Tilastolliset testit (KS-testi, PSI)
- Piirrejakaumien seuranta
- Ennusteiden A/B-testaus
Lieventämismenetelmät
- Säännöllinen mallin uudelleenkoulutus
- Online-oppiminen — jatkuva koulutus
- Ensemble-menetelmät päivityksillä
- Automatisoidut MLOps-putket