Nedir Veri Soyu
Veri kökenini izleme
Veri Soyu Nedir
Veri Soyu, tüm dönüşümler, toplamalar ve sistemler arası hareketler dahil olmak üzere verilerin kaynaktan tüketiciye tam yolunu izlemektir.
Soy Türleri
| Tür | Açıklama | |-----|----------| | Teknik Soy | Tablo, sütun, SQL seviyesinde | | İş Soyu | İş terimleri ve KPI'lar | | Operasyonel Soy | İşler, zamanlamalar, bağımlılıklar | | Sütun Seviyesi | Alan seviyesi dönüşümler |
Soy Neden Önemli
- Etki analizi — değişiklikte ne bozulur
- Kök neden analizi — hata nereden geldi
- Uyumluluk — GDPR, SOX uyumu
- Dokümantasyon — veriyi anlama
- Geçiş — geçişleri planlama
Araçlar
| Araç | Özellikler | |------|------------| | Apache Atlas | Açık kaynak, Hadoop | | OpenLineage | Standart, entegrasyonlar | | DataHub | LinkedIn, graf tabanlı | | Atlan | Modern veri kataloğu | | Collibra | Kurumsal |
Otomatik Soy Toplama
- SQL ayrıştırma — sorgu analizi
- API entegrasyonları — Airflow, dbt, Spark'tan
- Log analizi — işleme sistemlerinden
- Metadata toplama — kataloglardan
Görselleştirme
- Bağımlılık grafikleri
- Yukarı/aşağı akış analizi
- Etki değerlendirmesi
- Dönüşüm zaman çizelgesi
Pratik Uygulamalar
- Veri sorunlarını hata ayıklama
- Uyumluluk raporlama
- Veri geçişi planlama
- Yeni çalışan oryantasyonu
- Veri varlıkları dokümantasyonu