Visão Geral

Este curso avançado é focado na administração de clusters Kafka em ambientes de produção. Os participantes aprenderão sobre monitoramento, segurança, tuning de performance e otimização de clusters em larga escala. O curso também cobre a administração de Kafka em ambientes multi-datacenter, integração com sistemas de monitoramento e práticas de segurança para proteger seus dados.

Objetivo

Após realizar este curso Apache Kafka Advanced Administration", você será capaz de:

1. Configurar e gerenciar clusters Kafka complexos em produção.
2. Implementar práticas de segurança, tuning de performance e monitoramento avançado.
3. Executar operações de recuperação de falhas e migrações de dados.

Publico Alvo

Administradores de sistemas, engenheiros de dados, engenheiros DevOps e profissionais de TI responsáveis pela manutenção e operação de clusters Kafka em produção.

Pre-Requisitos

Experiência prévia com Kafka, incluindo instalação e configuração básica, além de familiaridade com sistemas Linux e redes.

Materiais

Conteúdo Programatico

Administração de Clusters Kafka

1. Gerenciamento de Brokers
2. Manutenção e atualizações de clusters

Monitoramento e Alertas

1. Usando Prometheus e Grafana
2. Configuração de JMX para monitoramento
3. Integração com ferramentas de monitoramento externas

Performance Tuning

1. Tuning de performance dos Producers e Consumers
2. Otimização de latência e throughput
3. Gerenciamento de backlog de mensagens

Segurança no Kafka

1. Implementação de SSL/SASL para autenticação
2. Gerenciamento de ACLs (Listas de Controle de Acesso)
3. Proteção de dados em repouso e em trânsito

Gerenciamento Multi-Datacenter

1. Configurando replicação entre clusters (MirrorMaker)
2. Planejamento de arquiteturas multi-data center

Recuperação de Falhas e Disaster Recovery

1. Procedimentos para recuperação de falhas de broker
2. Backup e restore de dados

Planejamento e Dimensionamento de Clusters Kafka

1. Escalabilidade horizontal e vertical
2. Boas práticas de dimensionamento