Automated Deployment with Databricks Asset Bundles - Portuguese BR

Este curso fornece uma revisão abrangente dos princípios de DevOps e sua aplicação em projetos Databricks. Ele começa com uma visão geral dos principais DevOps, DataOps, integração contínua (CI), implantação contínua (CD) e testes, e explora como esses princípios podem ser aplicados a pipelines de engenharia de dados.

Em seguida, o curso se concentra na implantação contínua dentro do processo de CI/CD, examinando ferramentas como a API REST do Databricks, o SDK e a CLI para implantação de projetos. Você aprenderá sobre os DABs (Asset Bundles, pacotes de ativos do Databricks) e como eles se encaixam no processo de CI/CD. Você se aprofundará em seus principais componentes, na estrutura de pastas e em como eles simplificam a implantação em vários ambientes de destino no Databricks. Você também aprenderá a adicionar variáveis, modificar, validar, implantar e executar Databricks Asset Bundles para vários ambientes com configurações diferentes usando a CLI do Databricks.

Por fim, o curso apresenta o Visual Studio Code como um ambiente de desenvolvimento interativo (IDE) para criar, testar e implantar Databricks Asset Bundles localmente, otimizando seu processo de desenvolvimento. O curso termina com uma introdução à automação de pipelines de implantação usando ações do GitHub para aprimorar o fluxo de trabalho de CI/CD com Databricks Asset Bundles.

Ao final deste curso, você estará equipado para automatizar as implantações de projetos do Databricks com os Databricks Asset Bundles, melhorando a eficiência por meio de práticas de DevOps.

Languages Available: English | 日本語 | Português BR | 한국어

Skill Level

Professional

Duration

Prerequisites

Forte conhecimento da plataforma Databricks, incluindo experiência com Databricks Workspaces, Apache Spark, Delta Lake, Medallion Architecture, Unity Catalog, Delta Live Tables e Workflows. Em particular, conhecimento do uso de Expectativas com DLTs.
Experiência em ingestão e transformação de dados, com proficiência em PySpark para processamento de dados e manipulação de DataFrame. Os candidatos também devem ter experiência em escrever consultas SQL de nível intermediário para análise e transformação de dados.
Proficiência em programação Python, incluindo a capacidade de projetar e implementar funções e classes, e experiência com criação, importação e utilização de pacotes Python.
Familiaridade com práticas de DevOps, particularmente integração contínua e princípios de entrega/implantação contínua (CI/CD).
Uma compreensão básica do controle de versão Git.
Pré-requisito do curso: DevOps Essentials para o curso de Engenharia de Dados

Outline

DevOps e CI/CD Revisão

Revisão de DevOps
Integração Contínua e Entrega Contínua Implantação/Entrega (CI/CD) Revisão
Configuração do curso e Autenticação

Deploy com Ativo do Databricks Bundles (DABs)

Implantação de Databricks Projetos
Introdução a Recurso Databricks Pacotes (DABs)
Implantando um DAB simples
Implantação de um DAB simples
Substituições de variáveis em DABs
Implantando um DAB (Pacote de Ativos de Databricks) em Vários ambientes
Implantar um DAB em vários ambientes
Visão geral dos templates de projeto DAB
Usar um modelo de DAB padrão do Databricks
Visão geral do projeto de CI/CD com DABs
Integração Contínua e Entrega Contínua Implantação com DABs
Adicionando ML a Fluxos de trabalho de Engenharia com DABs

Fazendo mais com Ativo Databricks Pacotes

Desenvolvendo localmente com o Visual Studio Code (VSCode)
Usando o VSCode com Databricks
Práticas recomendadas de CI/CD para Engenharia de Dados
Próximos passos: Implantação automatizada com GitHub Actions

Self-Paced

Custom-fit learning paths for data, analytics, and AI roles and career paths through on-demand videos

See all our registration options

Registration options

Databricks has a delivery method for wherever you are on your learning journey

Self-Paced

Custom-fit learning paths for data, analytics, and AI roles and career paths through on-demand videos

Instructor-Led

Public and private courses taught by expert instructors across half-day to two-day courses

Blended Learning

Self-paced and weekly instructor-led sessions for every style of learner to optimize course completion and knowledge retention. Go to Subscriptions Catalog tab to purchase

Purchase now

Skills@Scale

Comprehensive training offering for large scale customers that includes learning elements for every style of learning. Inquire with your account executive for details

Upcoming Public Classes

Data Analyst

AI/BI for Data Analysts - Portuguese BR

Neste curso, você aprenderá a usar os recursos que o Databricks fornece para as necessidades de business intelligence: Painéis de IA/BI e AI/BI Genie. Como Analista de Dados da Databricks, você terá a tarefa de criar Painéis de IA/BI e AI/BI Genie Spaces dentro da plataforma, gerenciar o acesso a esses ativos pelas partes interessadas e necessárias e manter esses ativos à medida que são editados, atualizados ou desativados ao longo de sua vida útil. Este curso pretende instruir os participantes sobre como projetar painéis para percepções de negócios, compartilhá-los com colaboradores e partes interessadas e manter esses ativos dentro da plataforma. Os participantes também aprenderão a utilizar os AI/BI Genie Spaces para dar suporte à análise de autoatendimento por meio da criação e manutenção desses ambientes alimentados pelo Databricks Data Intelligence Engine.

Advanced Data Engineering with Databricks - Portuguese BR

Este curso serve como um ponto de entrada apropriado para aprender Engenharia de Dados Avançada com Databricks. Abaixo, descreveremos cada um dos quatro módulos de quatro horas incluídos neste curso.

Databricks Streaming and Delta Live Tables

O curso Databricks Streaming and Delta Live Tables (DSDLT) foi desenvolvido para preparar os alunos para o exame de certificação Databricks Certified Professional Data Engineer. O conteúdo deste curso consiste nos módulos de nível profissional do roteiro de aprendizagem para engenharia de dados e pode ser ministrado como treinamento conduzido por instrutor (ILT).

Databricks Data Privacy

Este conteúdo fornece um guia abrangente sobre o gerenciamento da privacidade de dados na Databricks. Ele aborda tópicos importantes, como arquitetura Delta Lake, isolamento de dados regional, compliance com GDPR/CCPA e uso de Change Data Feed (CDF). Por meio de demonstrações práticas e laboratórios práticos, os participantes aprendem a usar os recursos do Unity Catalog para proteger dados confidenciais e garantir a compliance, capacitando-os a proteger a integridade dos dados de forma eficaz.

Databricks Performance Optimization

Neste curso, você aprenderá a otimizar cargas de trabalho e disposições com Spark e Delta Lake e analisar o Spark UI para avaliar desempenho e depurar aplicativos. Abordaremos tópicos como transmissão, clustering líquido, omissão de dados, cache, fótons e muito mais.

Automated Deployment with Databricks Asset Bundles