Engenharia de Dados com Apache Iceberg e Spark
Compre Agora
Saiba mais
1. Introdução e Apresentação do Apache Iceberg
Apresentação
Material do Curso
Data Warehouses, Data Lakes e Data Lakehouse
Apache Iceberg como Solução para Data Swamps
Introdução ao Apache Iceberg
Catalgo e Metadados do Apache Iceberg
Transações ACID
Time Travel e Snapshots
Particionamento de Dados
Outras Características do Apache Iceberg
Compatibilidades do Apache Iceberg
2. Fundamentos de Spark
Introdução ao Spark
Arquitetura e Componentes
Content e Session
3. Configurando o Ambiente do Curso
Ambiente para o Curso
Conhecendo o Google Colab
Atualização na Criação do Ambiente
Configurando o Ambiente
4. Primeiros Passos, Snapshots e TimeTravel
Primeiro Exemplo: Caso Básico
Criando Snapshots
Voltando no Passado: Time Travel
5. Particionamento de Dados e Rollbacks
Particionamento de Dados
Executando Rollbacks
6. Incorporando Dados Existentes de Outras Fontes
Incorporando um Parquet Existente ao Data Lake com Iceberg
Apresentação do Sistema de Vendas
Incluindo Sistematicamente Atualizações e Inclusões ao Data Lake
7. Evolução de Schema, Compactação de Dados e Uso de Metadados
Evolução de Schema
Compactação de Dados
Leitura de Metadados e Catálogo
Produtos
Curso
Seção
5. Particionamento de Dados e Rollbacks
5. Particionamento de Dados e Rollbacks
Engenharia de Dados com Apache Iceberg e Spark
Compre Agora
Saiba mais
1. Introdução e Apresentação do Apache Iceberg
Apresentação
Material do Curso
Data Warehouses, Data Lakes e Data Lakehouse
Apache Iceberg como Solução para Data Swamps
Introdução ao Apache Iceberg
Catalgo e Metadados do Apache Iceberg
Transações ACID
Time Travel e Snapshots
Particionamento de Dados
Outras Características do Apache Iceberg
Compatibilidades do Apache Iceberg
2. Fundamentos de Spark
Introdução ao Spark
Arquitetura e Componentes
Content e Session
3. Configurando o Ambiente do Curso
Ambiente para o Curso
Conhecendo o Google Colab
Atualização na Criação do Ambiente
Configurando o Ambiente
4. Primeiros Passos, Snapshots e TimeTravel
Primeiro Exemplo: Caso Básico
Criando Snapshots
Voltando no Passado: Time Travel
5. Particionamento de Dados e Rollbacks
Particionamento de Dados
Executando Rollbacks
6. Incorporando Dados Existentes de Outras Fontes
Incorporando um Parquet Existente ao Data Lake com Iceberg
Apresentação do Sistema de Vendas
Incluindo Sistematicamente Atualizações e Inclusões ao Data Lake
7. Evolução de Schema, Compactação de Dados e Uso de Metadados
Evolução de Schema
Compactação de Dados
Leitura de Metadados e Catálogo
2 Lições
Particionamento de Dados
Executando Rollbacks