Ir para o conteúdo principal

Data Governance at Scale - Portuguese BR

Neste curso, você aprenderá como implementar governança de dados em escala no Databricks usando o Unity Catalog, com foco em controle de acesso baseado em atributos, observabilidade e compartilhamento federado. Você irá configurar o ABAC com tags governadas, migrar de controles legados de granularidade fina, habilitar e usar tabelas de sistema para auditoria e monitoramento de custos, implantar o Data Quality Monitoring para qualidade de dados e modelos, interpretar a linhagem para impacto e compliance, e aplicar padrões de governança federada e Delta Sharing para colaboração segura entre clouds.


Nota: A Databricks Academy está fazendo a transição para um formato baseado em notebooks para as sessões em sala de aula dentro do ambiente Databricks, descontinuando o uso de apresentações de slides para as aulas. Você pode acessar os notebooks de aula no ambiente de laboratório do Vocareum.

Skill Level
Associate
Duration
4h
Prerequisites

Conclua o seguinte curso antes de iniciar este curso: 

• Databricks Fundamentals (ou curso introdutório equivalente do Databricks)


Neste curso, o conteúdo foi desenvolvido para participantes com as seguintes habilidades/conhecimentos/capacidades: 

• Familiaridade com a plataforma Databricks e operações básicas no workspace (criação e anexação de clusters, execução de Notebooks, gerenciamento de execuções básicas de job). 

• Conhecimento prático dos principais conceitos de governança de dados, como controle de acesso, permissões e políticas de segurança em uma plataforma de dados. 

• Experiência intermediária em SQL, incluindo criação e gerenciamento de tabelas, visões e funções, além de concessão/revogação de privilégios em objetos de banco de dados. 

• Compreensão do modelo básico de objetos do Unity Catalog (metastore, catálogos, esquemas, tabelas, volumes, funções, modelos). 

• Compreensão básica de linhagem de dados e como os dados se movem entre fontes, transformações e ativos de analítica ou ML downstream. 

• Familiaridade com técnicas de segurança refinada, como filtros em nível de linha e mascaramento de colunas, mesmo que ainda não implementadas no Unity Catalog. 

• Conhecimento básico de conceitos de cloud (compute, armazenamento, identidades/grupos) em pelo menos um grande provedor de cloud. 

• Conhecimento básico de gerenciamento de metadados e práticas de descobrimento de dados em plataformas de dados modernas.

Outline

Controle de Acesso em Escala: ABAC

• Por que ABAC, Quando ABAC

• Tags Governadas e Políticas de Tag

• Modelo de Política, Escopo e Herança

• Migração de RLS/CM para ABAC

• Demonstração: Controle de Acesso Baseado em Atributos com Políticas de tag no Databricks

• Laboratório: Implementando ABAC para Governança de Dados em Serviços Financeiros


Observabilidade: Governança e Auditoria em Escala

• Habilitando Esquemas de Sistema e Acesso

• Uso e Custo: system.billing e Orçamentos

• Dashboards e Entrega de log de Diagnóstico

• Demonstração: Auditoria, Monitoramento e Consciência de Custos com Tabelas do Sistema

• Laboratório: Auditoria, Monitoramento e Conscientização de Custos com System Tables


Monitoramento de Qualidade de Dados

• Arquitetura e Tipos de Monitoramento

• Configurar um Monitor e Saídas

• Indicadores Personalizados e Notificações

• Lendo Dashboards Como um Engenheiro de Confiabilidade de Site

• Demonstração: Monitoramento de Qualidade de Dados

• Laboratório: Gerenciamento de Qualidade de Dados de E-Commerce


Linhagem de Dados e Modelos

• Por que Linhagem: RCA, Impacto, Compliance

• Linhagem e Permissões na Interface

• Tabelas do Sistema de Linhagem de Query

• Linhagem de Modelos e Traga Sua Própria Linhagem

• Demonstração: Visibilidade de Linhagem e Governança

• Laboratório: Linhagem, Governança e Compliance


Governança Federada e Compartilhamento de Dados entre Cloud

• Padrões de Governança Federada

• Lakehouse Federation Primer

• Colaboração entre Clouds com Delta Sharing

Public Class Registration

If your company has purchased success credits or has a learning subscription, please fill out the Training Request form. Otherwise, you can register below.

Private Class Request

If your company is interested in private training, please submit a request.

See all our registration options

Registration options

Databricks has a delivery method for wherever you are on your learning journey

Runtime

Self-Paced

Custom-fit learning paths for data, analytics, and AI roles and career paths through on-demand videos

Registre-se agora

Instructors

Instructor-Led

Public and private courses taught by expert instructors across half-day to two-day courses

Registre-se agora

Learning

Blended Learning

Self-paced and weekly instructor-led sessions for every style of learner to optimize course completion and knowledge retention. Go to Subscriptions Catalog tab to purchase

Purchase now

Scale

Skills@Scale

Comprehensive training offering for large scale customers that includes learning elements for every style of learning. Inquire with your account executive for details

Upcoming Public Classes

Advanced Machine Learning with Databricks - Portuguese BR

Este curso é destinado a cientistas de dados e profissionais de machine learning e é composto por dois módulos de quatro horas.

Machine Learning at Scale

Neste curso, você adquirirá conhecimento teórico e prático sobre a arquitetura do Apache Spark e sua aplicação em cargas de trabalho de machine learning no Databricks. Você aprenderá quando usar o Spark para preparação de dados, treinamento de modelos e implantação, além de obter experiência prática com Spark ML e APIs do Pandas no Spark. Este curso apresentará conceitos avançados, como ajuste de hiperparâmetros e escalabilidade do Optuna com Spark. Este curso utilizará recursos e conceitos introduzidos no curso associado, como MLflow e Unity Catalog, para empacotamento e governança abrangentes de modelos.

Advanced Machine Learning Operations

Neste curso, você receberá uma compreensão abrangente do ciclo de vida de machine learning e de MLOps, com ênfase nas melhores práticas para gerenciamento de dados e modelos, testes e arquiteturas escaláveis. O curso aborda os principais componentes de MLOps, incluindo CI/CD, gerenciamento de pipeline e separação de ambientes, ao mesmo tempo em que apresenta as ferramentas do Databricks para automação e gerenciamento de infraestrutura, como Declarative Automation Bundles (DABs), Lakeflow Jobs e Model Serving. Você aprenderá sobre monitoramento, métricas personalizadas, detecção de desvios, estratégias de implantação de modelos, testes A/B e os princípios de sistemas MLOps confiáveis, proporcionando uma visão holística da implementação e do gerenciamento de projetos de ML no Databricks.

Nota: A Databricks Academy está fazendo a transição para um formato baseado em notebooks para as sessões em sala de aula dentro do ambiente Databricks, descontinuando o uso de apresentações de slides para as aulas. Você pode acessar os notebooks de aula no ambiente de laboratório do Vocareum.

Paid
8h
Lab
instructor-led
Professional

Questions?

If you have any questions, please refer to our Frequently Asked Questions page.