Introdução ao Spark

Introdução ao Spark

Pré-visualização indisponível

Você precisa fazer login ou se inscrever para ver esta lição.

EntrarInscrever-se

Engenharia de Dados com Apache Iceberg e Spark

Comprar agoraSaiba mais

1. Introdução e Apresentação do Apache Iceberg

Apresentação

Material do Curso

Data Warehouses, Data Lakes e Data Lakehouse

Apache Iceberg como Solução para Data Swamps

Introdução ao Apache Iceberg

Catalgo e Metadados do Apache Iceberg

Transações ACID

Time Travel e Snapshots

Particionamento de Dados

Outras Características do Apache Iceberg

Compatibilidades do Apache Iceberg

2. Fundamentos de Spark

Introdução ao Spark

Arquitetura e Componentes

Content e Session

3. Configurando o Ambiente do Curso

Ambiente para o Curso

Conhecendo o Google Colab

Atualização na Criação do Ambiente

Configurando o Ambiente

4. Primeiros Passos, Snapshots e TimeTravel

Primeiro Exemplo: Caso Básico5

Criando Snapshots

Voltando no Passado: Time Travel

5. Particionamento de Dados e Rollbacks

Particionamento de Dados

Executando Rollbacks

6. Incorporando Dados Existentes de Outras Fontes

Incorporando um Parquet Existente ao Data Lake com Iceberg

Apresentação do Sistema de Vendas

Incluindo Sistematicamente Atualizações e Inclusões ao Data Lake

7. Evolução de Schema, Compactação de Dados e Uso de Metadados

Evolução de Schema

Compactação de Dados

Leitura de Metadados e Catálogo