Ir para o conteúdo principal

Data Ingestion with Lakeflow Connect - Portuguese BR

"Este curso fornece uma introdução abrangente ao Lakeflow Connect, uma solução escalável e simplificada para a ingestão de dados em Databricks de uma ampla gama de fontes. Você começará explorando os diferentes tipos de conectores Lakeflow Connect (Padrão e Gerenciado) e aprenderá várias técnicas de ingestão de dados, incluindo ingestão em lote, lote incremental e transmissão. Você também analisará os principais benefícios do uso de tabelas Delta e da arquitetura Medallion.


Em seguida, você desenvolverá habilidades práticas para ingerir dados do armazenamento de objetos do Cloud usando os conectores padrão do Lakeflow Connect. Isso inclui trabalhar com métodos como CREATE TABLE AS SELECT (CTAS), COPY INTO e Auto Loader, com ênfase nos benefícios e considerações de cada abordagem. Você também aprenderá a acrescentar colunas de metadados às tabelas de nível bronze durante a ingestão no Databricks Data Intelligence Platform. Em seguida, o curso aborda como lidar com registros que não correspondem ao esquema da tabela usando a coluna de dados resgatados, juntamente com estratégias para gerenciar e analisar esses dados. Você também explorará técnicas para ingerir e nivelar dados JSON semiestruturados.


Em seguida, você explorará como executar a ingestão de dados de nível empresarial usando os Conectores Gerenciados do Lakeflow Connect  para trazer dados de bancos de dados e aplicativos de software como serviço (SaaS). O curso também apresenta o Partner Connect como uma opção para integrar ferramentas de parceiros em seus fluxos de trabalho de ingestão.


Finalmente, o curso termina com estratégias alternativas de ingestão, incluindo operações MERGE INTO e alavancagem do Databricks Marketplace, equipando você com uma base sólida para dar suporte a casos de uso modernos de engenharia de dados."


Languages Available: English | 日本語 | Português BR | 한국어

Skill Level
Associate
Duration
4h
Prerequisites

- Noções básicas de Databricks Data Intelligence Platform, incluindo Databricks Workspaces, Apache Spark, Delta Lake, Arquitetura Medallion e Unity Catalog.

- Experiência em trabalhar com vários formatos de arquivo (por exemplo, Parquet, CSV, JSON, TXT).

- Proficiência em SQL e Python.

- Familiaridade com a execução de código em Databricks Notebooks.

Public Class Registration

If your company has purchased success credits or has a learning subscription, please fill out the Training Request form. Otherwise, you can register below.

Private Class Request

If your company is interested in private training, please submit a request.

See all our registration options

Registration options

Databricks has a delivery method for wherever you are on your learning journey

Runtime

Self-Paced

Custom-fit learning paths for data, analytics, and AI roles and career paths through on-demand videos

Registre-se agora

Instructors

Instructor-Led

Public and private courses taught by expert instructors across half-day to two-day courses

Registre-se agora

Learning

Blended Learning

Self-paced and weekly instructor-led sessions for every style of learner to optimize course completion and knowledge retention. Go to Subscriptions Catalog tab to purchase

Purchase now

Scale

Skills@Scale

Comprehensive training offering for large scale customers that includes learning elements for every style of learning. Inquire with your account executive for details

Upcoming Public Classes

Building Reliable Conversational Agents with Genie - Portuguese BR

Este curso ensina como projetar, construir e manter um Genie Space do Databricks, uma interface de linguagem natural que permite que usuários de negócios façam perguntas sobre dados controlados e recebam respostas baseadas em SQL sem precisar escrever código.

Você aprenderá como o Genie se encaixa na família de produtos de IA/BI do Databricks e como ele traduz a linguagem natural em consultas SQL confiáveis. O curso se concentra no que é necessário para criar um Genie Space que forneça resultados precisos, consistentes e confiáveis.

Você seguirá um fluxo de trabalho completo, do início ao fim, desde a compreensão dos dados de origem e a definição de parâmetros de referência até a configuração e o aprimoramento de um Genie Space usando o conjunto completo de ferramentas de curadoria do Knowledge Store. Isso inclui metadados, sinônimos, correspondência de prompts, lógica SQL, consultas de exemplo e instruções de texto.

Você também aprenderá a compartilhar Genie Spaces com usuários de negócios por meio do Databricks One, compreenderá como a governança do Unity Catalog é aplicada automaticamente e utilizará o monitoramento e o feedback dos usuários para melhorar continuamente a qualidade ao longo do tempo.

Ao final do curso, você será capaz de criar e gerenciar um Genie Space pronto para produção que ofereça análises conversacionais em escala, governadas e no modelo de autoatendimento. 

Observação: a Databricks Academy está mudando para um formato baseado em cadernos para as aulas presenciais no ambiente Databricks, deixando de usar apresentações de slides para as palestras. Você pode acessar os cadernos das palestras no ambiente de laboratório Vocareum.

Paid
4h
Lab
instructor-led
Associate

Questions?

If you have any questions, please refer to our Frequently Asked Questions page.