Visão Geral

Curso Apache Flink Advanced. Este curso avançado é projetado para profissionais que desejam dominar o Apache Flink em ambiente de produção. O conteúdo aborda arquitetura distribuída, design de pipelines críticos, tuning em larga escala, Flink em ambientes de nuvem e Kubernetes, além de explorar internas do Flink Runtime.

Objetivo

Após realizar este curso Apache Flink Advanced, você será capaz de:

• Projetar e manter pipelines críticos em larga escala
• Otimizar jobs para throughput e latência mínima
• Customizar o runtime do Flink
• Trabalhar com Flink em ambientes de produção distribuídos
• Dominar o Flink SQL em larga escala
• Implantar Flink profissionalmente no Kubernetes

Publico Alvo

• Engenheiros de dados experientes
• Arquitetos de dados
• Desenvolvedores sêniores
• Especialistas em streaming analytics

Pre-Requisitos

• Curso Flink Intermediate
• Experiência prática com clusters distribuídos
• Conhecimento sólido em Kafka e sistemas distribuídos

Materiais

Conteúdo Programatico

Module 1 – Flink Runtime Deep Dive

1. How Flink executes jobs internally
2. Task scheduling
3. Network stack deep dive
4. Shuffle mechanisms
5. Understanding checkpoints at the binary level

Module 2 – High-Performance State Management

1. RocksDB advanced tuning
2. Async I/O patterns
3. Large-scale state checkpointing
4. Incremental checkpoints
5. Multi-tier state backends

Module 3 – Architecting Enterprise Flink Pipelines

1. Large-scale streaming patterns
2. Saga patterns for streaming
3. Event-driven microservices with Flink
4. Multi-region architectures

Module 4 – Flink SQL Advanced

1. Query optimization
2. Continuous aggregation semantics
3. SQL on large streaming tables
4. Designing enterprise-grade SQL pipelines

Module 5 – Flink on Kubernetes (Advanced)

1. Native Kubernetes mode
2. Reactive scaling
3. Autoscaling Flink jobs
4. Resource isolation
5. Monitoring with Prometheus + Grafana

Module 6 – Observability & Debugging

1. Internals of backpressure
2. Slow operator detection
3. Deep debugging techniques
4. Fine-grained logs interpretation

Module 7 – Security & Governance

1. TLS encryption
2. Authentication & authorization
3. Secure Kafka–Flink integration
4. Row-level policies

Module 8 – Final Project

1. Build a mission-critical enterprise pipeline with:
2. High-volume Kafka events
3. Advanced SQL transformations
4. Autoscaling in Kubernetes
5. Fully optimized RocksDB state