Visão Geral

No Curso MarkLogic Data Curation, você aprenderá a construir um MarkLogic Data Hub alimentado pelo banco de dados MarkLogic para ajudar a acelerar projetos de integração de dados e entregar valor mais rápido aos seus clientes.

Objetivo

Ao participar do Curso MarkLogic Data Curation, os participantes aprenderão a:

• Desenvolva, teste, depure e implante código personalizado usando um IDE local (Visual Studio Code)
• Use código personalizado durante a ingestão, mapeamento e masterização
• Implementar um modelo de entidade que inclua aninhamento e relacionamentos
• Carregue dados de diversas fontes
• Carregue dados usando vários métodos e descreva os casos de uso e as práticas recomendadas para cada método
• Use código personalizado durante a ingestão de dados
• Implementar configurações de mapeamento para um modelo de dados mais complexo
• Implemente configurações de masterização inteligentes com mais complexidade e personalização

Publico Alvo

O Curso MarkLogic Data Curationé ideal para:

• Arquitetos de dados, desenvolvedores MarkLogic, engenheiros de dados

Pre-Requisitos

• Conhecimento do Hub Central
• Conhecimento de segurança MarkLogic

Materiais

Conteúdo Programatico

Data Services First

1. Understand the high-level approach to data integration projects using the MarkLogic Data Hub
2. Understand the customer and business requirement for the course hands-on project
3. Understand the user stories and technical requirements for the course hands-on project
4. Understand the data sources available for the course hands-on project

The MarkLogic Data Hub

1. Understand what it is
2. Understand what it does
3. Initialize and install a new MarkLogic Data Hub project

Implement Security

1. Create users and roles for both business users and members of the technical project team
2. Understand how to use Data Hub specific roles
3. Implement role hierarchies
4. Assign execute privileges necessary to meet project requirements
5. Deploy security configuration using QuickStart and ml-gradle

Create an Entity

1. Create a new entity
2. Define properties
3. Configure Indexed
4. Protect access to PII (personally identifiable information)

Ingest Data

1. Create flow pipelines
2. Configure ingestion steps
3. Understand the purpose and use of the staging and final databases in a MarkLogic Data Hub
4. Implement key data modeling concepts including document URIs, collections, document permissions, property naming best practices, geospatial data modeling patterns, denormalization, and the use of the envelope pattern

Curate Data

1. Configure mapping steps
2. Use pre-built mapping functions
3. Program, deploy and use a custom mapping function
4. Test and debug mapping steps

Use Semantics

1. Understand key semantic data modeling concepts including triples, IRIs, ontology triples, managed and unmanaged triples
2. Load triples to a MarkLogic Data Hub
3. Program, deploy and use a custom harmonization step to add triples to the envelope of a document

Access Data

1. Explore the use of JavaScript APIs
2. Explore the use of SPARQL
3. Validate that the curated data from the hub can be used to meet the business and technical requirements for the hands-on project

Adapt to Change: Perform Another Iteration of Ingest | Curate | Access

1. Ingest a new data source
2. Curate the new data so that it can be consumed in the same way as existing data

Use Smart Mastering

1. Configure a matching step
2. Configure a merging step
3. Test Smart Mastering
4. Explore mastered data