Visão Geral

DP-203T00 Data Engineering on Microsoft Azure, Neste curso, o aluno aprenderá como implementar e gerenciar cargas de trabalho de engenharia de dados no Microsoft Azure, usando serviços do Azure como Azure Synapse Analytics, Azure Data Lake Storage Gen2, Azure Stream Analytics, Azure Databricks e outros. O curso se concentra em tarefas comuns de engenharia de dados, como orquestrar transferência de dados e pipelines de transformação, trabalhar com arquivos de dados em um data lake, criar e carregar data warehouses relacionais, capturar e agregar fluxos de dados em tempo real e rastrear ativos e linhagem de dados.

Objetivo

Após realizar este DP-203T00 Data Engineering on Microsoft Azure, você será capaz de:

• Explore opções de computação e armazenamento para cargas de trabalho de engenharia de dados no Azure
• Execute consultas interativas usando pools SQL sem servidor
• Executar exploração e transformação de dados no Azure Databricks
• Explore, transforme e carregue dados no Data Warehouse usando o Apache Spark
• Ingerir e carregar dados no Data Warehouse
• Transforme dados com Azure Data Factory ou Azure Synapse Pipelines
• Integre dados de notebooks com Azure Data Factory ou Azure Synapse Pipelines
• Compatível com Processamento Analítico Transacional Híbrido (HTAP) com Azure Synapse Link
• Realize segurança de ponta a ponta com o Azure Synapse Analytics
• Realize processamento de fluxo em tempo real com Stream Analytics
• Crie uma solução de processamento de fluxo com hubs de eventos e Azure Databricks

Publico Alvo

O público principal deste curso são profissionais de dados, arquitetos de dados e profissionais de inteligência de negócios que desejam aprender sobre engenharia de dados e criar soluções analíticas usando tecnologias de plataforma de dados existentes no Microsoft Azure. O público secundário deste curso inclui analistas de dados e cientistas de dados que trabalham com soluções analíticas criadas no Microsoft Azure.

Pre-Requisitos

• Conhecimento de computação em nuvem e conceitos básicos de dados e experiência profissional com soluções de dados.

Materiais

Conteúdo Programatico

1. Introduction to data engineering on Azure
2. Introduction to Azure Data Lake Storage Gen2
3. Introduction to Azure Synapse Analytics
4. Use Azure Synapse serverless SQL pool to query files in a data lake
5. Use Azure Synapse serverless SQL pools to transform data in a data lake
6. Create a lake database in Azure Synapse Analytics
7. Analyze data with Apache Spark in Azure Synapse Analytics
8. Transform data with Spark in Azure Synapse Analytics
9. Use Delta Lake in Azure Synapse Analytics
10. Analyze data in a relational data warehouse
11. Load data into a relational data warehouse
12. Build a data pipeline in Azure Synapse Analytics
13. Use Spark Notebooks in an Azure Synapse Pipeline
14. Plan hybrid transactional and analytical processing using Azure Synapse Analytics
15. Implement Azure Synapse Link with Azure Cosmos DB
16. Implement Azure Synapse Link for SQL
17. Get started with Azure Stream Analytics
18. Ingest streaming data using Azure Stream Analytics and Azure Synapse Analytics
19. Visualize real-time data with Azure Stream Analytics and Power BI
20. Introduction to Microsoft Purview
21. Integrate Microsoft Purview and Azure Synapse Analytics
22. Explore Azure Databricks
23. Use Apache Spark in Azure Databricks
24. Run Azure Databricks Notebooks with Azure Data Factory