O que é ETL
Extrair, Transformar, Carregar dados
ETL (Extract, Transform, Load) é o processo de extração de dados de várias fontes, transformação e carregamento em um armazenamento de destino para análise e relatórios.
Etapas do ETL
- Extract (Extração) — coleta de dados de bancos, APIs, arquivos
- Transform (Transformação) — limpeza, validação, agregação
- Load (Carregamento) — transferência para data warehouse ou data lake
Ferramentas ETL
- Apache Airflow — orquestração de pipelines
- Talend — plataforma ETL empresarial
- dbt — transformação no warehouse
- Fivetran — integração automatizada
Aplicações empresariais
- Construção de data warehouses
- Integração CRM, ERP, marketing
- Preparação de dados para relatórios BI
- Migração de sistemas