O que é Big Data
Processamento de grandes volumes de dados
Big Data — tecnologias e métodos para trabalhar com dados grandes ou complexos demais para ferramentas de processamento tradicionais.
Características (5V)
- Volume — tamanho dos dados (terabytes, petabytes)
- Velocity — velocidade de geração e processamento
- Variety — diversidade de tipos de dados
- Veracity — confiabilidade e qualidade
- Value — valor de negócio
Tecnologias
- Hadoop — armazenamento distribuído (HDFS)
- Spark — processamento rápido em memória
- Kafka — streaming de dados
- Elasticsearch — busca e análise
- Data Lake — lagos de dados (S3, Azure Data Lake)
Aplicações de Negócios
- Analytics de Clientes — segmentação, personalização
- Analytics Preditivo — previsão de demanda
- Detecção de Fraude — análise de transações
- Otimização de Operações — logística, manufatura
- Marketing — análise de efetividade de campanhas