Começando com DLT

Sabemos que você adorou nosso guia original do DLT, mas estava na hora de um upgrade. Nós o substituímos por algo ainda melhor: um tutorial totalmente novo que apresenta o avanço mais recente em engenharia de dados do Databricks: Lakeflow Spark Declarative Pipelines (SDP).

Com base na DLT, o Lakeflow SDP representa nossa visão para a engenharia de dados moderna. Agora totalmente integrado ao ecossistema LakeFlow, ele oferece recursos de pipeline de ponta a ponta, conectando a ingestão de dados, a transformação e a orquestração por meio de uma única plataforma inteligente que escala sem esforço com o seu negócio.

Para os pipelines de dados existentes, você não precisa alterar nada: todos os pipelines de DLT continuam a ser executados perfeitamente no Lakeflow, sem a necessidade de atualizações ou modificações de código. Todos os recursos do DLT — incluindo tabelas de transmissão, materialized views e expectativas de qualidade de dados — permanecem disponíveis, e os pipelines agora estão ainda mais integrados ao lakehouse.

Nosso novo tutorial prático de SDP coloca você no cockpit com um exemplo real de aviônica. Você vai construir um pipeline pronto para produção que processa dados de IoT de milhares de aeronaves. Pronto para aprimorar suas habilidades de engenharia de dados? 

Confira o novo guia Como começar com Apache Spark Declarative Pipelines hoje mesmo.