Трансферлік оқыту дегеніміз не
Білімді бір тапсырмадан екіншісіне тасымалдау
Трансферлік оқыту — бір тапсырмада оқытылған модель басқа тапсырманы шешуге бастапқы нүкте ретінде қолданылатын ML техникасы.
Трансферлік оқыту түрлері
- Ерекшеліктерді шығару — базалық модельді мұздату, тек жоғарғы қабаттарды оқыту
- Файн-тюнинг — бөлігін немесе барлық қабаттарды қосымша оқыту
- Домен бейімделуі — жаңа деректер доменіне бейімделу
- Көп тапсырмалы оқыту — бір уақытта бірнеше тапсырмада оқыту
Артықшылықтары
- Аз деректер — жаңа тапсырма үшін үлкен деректер жиынтығы қажет емес
- Жылдам оқыту — нөлден бастамау
- Жақсы сапа — үлкен деректер жиынтығының білімін пайдалану
- Ресурс үнемдеу — оқыту үшін аз есептеулер
Танымал алдын ала оқытылған модельдер
- Кескіндер — ResNet, VGG, EfficientNet, CLIP
- Мәтін — BERT, GPT, T5, LLaMA
- Аудио — Wav2Vec, Whisper
- Көп режимді — CLIP, BLIP, Flamingo
Бизнес қолданбалар
- Кескін классификациясы — ImageNet-тен корпоративтік деректерге тасымалдау
- NLP тапсырмалары — BERT-тен арнайы доменге тасымалдау
- Денсаулық сақтау — жалпы модельді медициналық кескіндерге тасымалдау
- Стартаптар — үлкен деректер жиынтығынсыз жылдам ML іске қосу