Delta Lake – Universidade – ICI

Conteúdo do Curso

Expandir

Módulo 1: Introdução ao Delta Lake 6 Tópicos | 1 Teste

Expandir

Módulo Conteúdo

0% Concluído 0/6 Etapas

Overview do curso

Histórico e evolução do Delta Lake

Fatores que impulsionaram o uso do Delta Lake

Conceitos fundamentais de Data Lakes, Lake House e Delta Lake

Armazenamento com SGBD, NoSQL e outros formatos de arquivos

Diferença do armazenamento com Delta Lake

Quiz – Delta Lake – Introdução ao Delta Lake

Módulo 2: Fundamentos do Delta Lake 5 Tópicos | 1 Teste

Expandir

Módulo Conteúdo

0% Concluído 0/5 Etapas

ACID Transactions e sua importância

Delta Log Transactions

Time Travel & Vaccum

Schema Enforcement/Evolution

Técnicas de otimização para I/O

Quiz – Delta Lake – Fundamentos do Delta Lake

Módulo 3: Instalação e Configuração do Delta Lake 3 Tópicos | 1 Teste Disponível em 01/01/2025 00:00

Expandir

Módulo Conteúdo

0% Concluído 0/3 Etapas

Configurando o ambiente de desenvolvimento

Instalação do Delta Lake em clusters Spark

Configurações iniciais para otimização de desempenho

Quiz – Delta Lake – Instalação e Configuração do Delta Lake

Módulo 4: Gerenciamento de Dados com Delta Lake 3 Tópicos Disponível em 01/01/2025 00:00

Expandir

Módulo Conteúdo

0% Concluído 0/3 Etapas

Ingestão de dados em Delta Lake

Gerenciamento de metadados e esquemas

Time travel (viajar no tempo) e recuperação de dados

Módulo 5: Operações Avançadas 4 Tópicos Disponível em 01/01/2025 00:00

Expandir

Módulo Conteúdo

0% Concluído 0/4 Etapas

Merge, Update e Delete Operations

Data Skipping e Z-Ordering para otimização de consultas

Partitioning e compaction strategies

Módulo 6: Governança de Dados 3 Tópicos Disponível em 01/01/2025 00:00

Expandir

Módulo Conteúdo

0% Concluído 0/3 Etapas

Governança e conformidade de dados com Delta Lake

Auditing e linhagem de dados

Integração com ferramentas de governança como OpenMetadata

Módulo 7: Integração e ETL com Delta Lake 4 Tópicos Disponível em 01/01/2025 00:00

Expandir

Módulo Conteúdo

0% Concluído 0/4 Etapas

Utilizando Delta Lake com Apache Spark

Construindo pipelines de ETL/ELT robustos

Transformações de dados e uso de dbt (Data Build Tool)

Materialização de dados em Delta Lake

Módulo 8: Delta Lake em Ambientes de Produção 3 Tópicos Disponível em 01/01/2025 00:00

Expandir

Módulo Conteúdo

0% Concluído 0/3 Etapas

Estratégias de deployment em ambientes de produção

Monitoramento, logging e troubleshooting

Manutenção e atualização de clusters Delta Lake

Módulo 9: Casos de Uso e Melhores Práticas 3 Tópicos Disponível em 01/01/2025 00:00

Expandir

Módulo Conteúdo

0% Concluído 0/3 Etapas

Estudos de caso: Implementação do Delta Lake em diferentes indústrias

Melhores práticas para escala e desempenho

Patterns e anti-patterns