Databricks elimina a dependência de formato de tabela e adiciona recursos para usuários corporativos com os avanços do Unity Catalog

O Unity Catalog é agora o catálogo mais completo para Apache Iceberg™ e Delta Lake, permitindo interoperabilidade aberta com governança entre mecanismos de computação, além de adicionar semântica unificada e uma rica experiência de descoberta para usuários corporativos.

Data + AI Summit, São Francisco, CA – 11 de junho de 2025 — A Databricks, empresa de dados e IA, anunciou hoje sua liderança na categoria de governança unificada com novos e poderosos recursos. O Unity Catalog adiciona suporte completo para tabelas do Apache Iceberg™, incluindo suporte nativo para as APIs REST Catalog do Apache Iceberg. Agora, o Unity Catalog é o único catálogo que permite que mecanismos externos leiam e gravem, com governança refinada, tabelas gerenciadas pelo Iceberg e otimizadas para desempenho, eliminando a dependência e permitindo uma interoperabilidade perfeita.
A Databricks também está introduzindo dois novos aprimoramentos que estendem o Unity Catalog aos usuários corporativos. Métricas de negócios e KPIs são a base de como as empresas gerenciam seus negócios e agora podem ser definidos como ativos de dados de primeira classe com o Unity Catalog Metrics. 
Além disso, a descoberta de dados + IA é aprimorada para usuários corporativos com um novo marketplace interno com curadoria que apresenta os dados de maior valor, IA e ativos de IA/BI, organizados por domínio de negócios. Todos esses ativos são complementados com inteligência de dados automatizada, para que cada equipe possa encontrar, confiar e agir com base nos dados certos.

O Unity Catalog agora elimina a necessidade de escolher entre formatos
Construído com base em padrões abertos, o Unity Catalog foi projetado para funcionar em todos os formatos de tabela e mecanismos. A Databricks agora está levando essa visão adiante com a Visualização Pública do suporte completo ao Apache Iceberg, unindo os ecossistemas Apache Iceberg e DeltaLake com uma abordagem única de governança.

A visualização adiciona três novos recursos. Primeiro, as organizações podem criar tabelas gerenciadas pelo Apache Iceberg que qualquer mecanismo compatível com Iceberg pode ler e gravar por meio da API Iceberg REST Catalog do Unity Catalog. Essas tabelas gerenciadas pelo Iceberg se beneficiam de todo o poder do Unity Catalog: melhor custo-benefício com Otimização Preditiva com tecnologia de IA; e governança unificada e aplicação de políticas tanto no Databricks quanto em mecanismos externos, incluindo Trino, Snowflake, Amazon EMR, etc. Em segundo lugar, os recursos pioneiros de Federação Lakehouse do Unity Catalog permitem acesso contínuo às tabelas Iceberg gerenciadas em catálogos externos, permitindo que essas tabelas sejam descobertas e governadas juntamente com as tabelas nativas. Em terceiro lugar, as tabelas Iceberg se beneficiam de todos os benefícios do ecossistema Delta Sharing, incluindo o compartilhamento interorganizacional contínuo das tabelas Iceberg. Esses recursos eliminam silos de dados baseados em formato — nenhum outro catálogo do setor oferece esses recursos.

Uma crescente desconexão entre plataformas de dados e usuários corporativos
Embora as plataformas de dados tenham avançado rapidamente para usuários técnicos, as equipes em toda a empresa permanecem desconectadas dos sistemas que impulsionam suas decisões. As equipes técnicas concentram seu mundo em tabelas, arquivos, computação e código, enquanto os usuários corporativos operam com ferramentas de BI, chatbots de IA e se concentram em KPIs e métricas de negócios em seus domínios de negócios. Essas linguagens fundamentalmente diferentes resultam em usuários corporativos inseguros sobre quais dados confiar ou dependentes de engenheiros para perguntas básicas. Sem uma base unificada para o contexto de negócios, as organizações enfrentam trabalho duplicado, paralisia decisória e uma lacuna persistente entre dados e ações.

Uma única fonte de verdade para métricas em toda a empresa
Para atender a essa necessidade, o Unity Catalog Metrics traz definições de métricas de negócios tradicionalmente incorporadas em ferramentas de BI para a plataforma de dados. Isso cria consistência e precisão na forma como todos na organização entendem o desempenho dos negócios. Ao contrário das camadas semânticas proprietárias de BI, o Unity Catalog Metrics é totalmente endereçável via SQL para garantir que todos na organização possam ter a mesma visão das métricas, independentemente da ferramenta escolhida. O Unity Catalog Metrics está disponível para todos os clientes hoje como uma prévia pública e estará disponível para o público em geral ainda neste verão.

Uma base unificada para o contexto: da descoberta guiada a insights inteligentes
Para tornar dados confiáveis ​​verdadeiramente utilizáveis ​​para usuários corporativos, a Databricks está introduzindo novos recursos do Unity Catalog que combinam descoberta intuitiva com inteligência integrada. Uma nova experiência Discover oferece um marketplace interno com curadoria de produtos de dados certificados — organizados por domínios de negócios como Vendas, Marketing ou Finanças e enriquecidos com documentação, propriedade, marcação e insights de uso. Recomendações automatizadas e inteligentes, aliadas a ferramentas de curadoria de administradores de dados, garantem que os ativos de maior valor — métricas, painéis, tabelas, agentes de IA, espaços Genie, etc. — possam ser facilmente explorados, compreendidos, confiáveis ​​e acessados ​​por meio de um fluxo de trabalho de autoatendimento, sem aprovações manuais ou suporte de engenharia. O Unity Catalog Discover agora está em Visualização Privada.

Inteligência em toda a experiência, revelando sinais de qualidade de dados, padrões de uso, relacionamentos entre ativos e status de certificação e descontinuação para ajudar os usuários a avaliar rapidamente a confiança e a relevância. Com o Assistente do Databricks integrado ao Unity Catalog, eles podem fazer perguntas em linguagem natural e obter respostas contextuais e fundamentadas com base em métricas governadas — transformando a descoberta em uma jornada guiada onde os dados são acessíveis, explicáveis, confiáveis ​​e prontos para uso.

"Criamos a categoria Governança Unificada com o Unity Catalog há quatro anos", disse Matei Zaharia, cofundador e CTO da Databricks. "Com essas atualizações do Unity Catalog, agora oferecemos o melhor catálogo do setor para Apache Iceberg e todos os formatos de tabela abertos, e o único que permite leituras e gravações em tabelas gerenciadas a partir de mecanismos externos, para um catálogo corporativo verdadeiramente aberto. Independentemente do formato de tabela escolhido por nossos clientes, garantimos que ele seja acessível, otimizado e governado. E com nosso foco expandido em usuários corporativos, estamos garantindo o cumprimento da promessa de democratizar dados + IA para todos os usuários da empresa."

Depoimentos de Clientes e Parceiros
“Na Riskified, queremos armazenar todos os nossos dados em um formato aberto e queremos um catálogo único que possa se conectar a todas as ferramentas que usamos”, disse Hen Ben-Hemo, Arquiteto de Plataforma de Dados da Riskified. “O Unity Catalog nos permite escrever tabelas Iceberg totalmente abertas a qualquer cliente Iceberg, desbloqueando todo o ecossistema lakehouse e preparando nossa arquitetura para o futuro.”

“O Unity Catalog Metrics nos oferece um local central para definir KPIs de negócios e padronizar a semântica entre as equipes, garantindo que todos trabalhem com as mesmas definições confiáveis ​​em painéis, SQL e aplicativos de IA.” — Richard Masters, Vice-Presidente de Dados e IA da Virgin Atlantic

“O Unity Catalog Metrics apresenta uma oportunidade empolgante para estabelecer consistência, confiança e controle na forma como as métricas de negócios são definidas e consumidas na Zalando. É uma contribuição promissora para decisões alinhadas e baseadas em dados em nossos painéis de BI, notebooks e outras ferramentas.” — Timur Yuere, Gerente de Engenharia, Zalando

“O Unity Catalog Metrics representa uma excelente oportunidade para os clientes do Tableau aproveitarem o valor da governança centralizada com o Databricks Unity Catalog. Por meio de nossa profunda integração e roteiro de expansão com o Databricks, estamos entusiasmados em ajudar nossos clientes a eliminar o atrito que os impede de utilizar o Databricks para definir suas principais métricas de negócios.” - Nicolas Brisoux, Diretor Sênior de Gerenciamento de Produtos da Tableau

“Estamos entusiasmados com a parceria com a Databricks para integrar o Unity Catalog Metrics ao Sigma. Isso dá às equipes de negócios acesso direto a métricas de negócios padronizadas e confiáveis ​​em seus painéis, para que todos possam tomar decisões com base em definições consistentes, sem depender das equipes de dados para cada pergunta.” — Dillion Morrison, Vice-Presidente de Produto, Sigma Computing

Disponibilidade
A Databricks está introduzindo a Visualização Pública do suporte completo ao Apache Iceberg no Unity Catalog. O Unity Catalog Metrics está disponível para todos os clientes hoje como Visualização Pública e estará disponível para todos no final deste verão. O Unity Catalog Discover agora está em Visualização Privada.

Sobre a Databricks
A Databricks é a empresa de dados e IA. Mais de 15.000 organizações em todo o mundo — incluindo Block, Comcast, Condé Nast, Rivian, Shell e mais de 60% da Fortune 500 — contam com a Databricks Data Intelligence Platform para assumir o controle de seus dados e colocá-los para trabalhar com IA. A Databricks tem sede em São Francisco, com escritórios ao redor do mundo, e foi fundada pelos criadores originais do Lakehouse, Apache Spark™, ​​Delta Lake e MLflow. Para saber mais, siga a Databricks no LinkedIn, X e Facebook.