A jornada da 7-Eleven para o sucesso com o Unity Catalog

A 7-Eleven, Inc. opera mais de 85.000 lojas em todo o mundo, atendendo a milhões de clientes todos os dias. Por trás dessa escala, existe uma plataforma de dados igualmente vasta, que alimenta o checkout móvel, os programas de fidelidade, a entrega sob demanda e a personalização orientada por IA.

Em 2023, essa plataforma estava apresentando sobrecarga. À medida que a plataforma crescia, os padrões de arquitetura legados, incluindo um Hive metastore externo e modelos de governança no nível do workspace, começaram a limitar a visibilidade e a consistência. Os metadados estavam fragmentados entre os ambientes, dificultando o descobrimento de dados e reduzindo a confiança. As equipes de compliance não tinham uma unified view do acesso a dados no nível da account, enquanto a dívida técnica se acumulava, pois milhares de Jobs dependiam de caminhos hard-coded, RDDs e pontos de montagem do DBFS. Ao mesmo tempo, a proliferação de dados em locais de armazenamento e workspaces legados desacelerava os esforços de modernização.

A equipe da Enterprise Data Platform (EDP) da 7-Eleven sabia que a migração para o Unity Catalog centralizaria o controle de acesso, simplificaria a compliance e possibilitaria uma arquitetura de dados federada. Neste blog, vamos explicar por que migramos para o Unity Catalog, como o UCX e as tabelas de sistema nos ajudaram a reorientar a migração e os benefícios que estamos colhendo agora que padronizamos o uso do UC.

Você pode saber mais sobre a migração da 7-Eleven para o Unity Catalog conferindo a sessão deles no Data + AI Summit 2025.

Construindo uma estratégia de governança de dados à prova de futuro

Para a 7-Eleven, o Unity Catalog não se tratava apenas de resolver as lacunas de governança; era sobre construir uma base para o futuro. O controle de acesso centralizado, o registro de auditoria, a linhagem e o descobrimento de dados simplificariam as operações e melhorariam a confiança nos dados. Uma arquitetura federada permitiria que os domínios de negócios inovassem de forma independente, enquanto ainda se alinhassem aos padrões corporativos. O Unity Catalog também prometia padronizar as métricas de negócios por meio de uma camada semântica, garantindo KPIs consistentes em analítica e relatórios.

No entanto, a 7-Eleven enfrentou o que eles chamaram de migração 'brownfield'. Anos de padrões de código enraizados, milhares de tabelas e notebooks, e jobs construídos em torno de um Hive metastore externo significavam que um simples 'lift-and-shift' não era possível. A equipe precisava de uma maneira estruturada para avaliar seu ambiente, remediar a dívida técnica e migrar sem interromper as operações diárias.

Os passos para uma migração tranquila com o UCX e tabelas de sistema

A 7-Eleven recorreu ao UCX, o assistente de migração de código aberto do Databricks Labs, para substituir o esforço manual por fluxos de trabalho estruturados. O UCX rastreou o ambiente deles, entregou um inventário abrangente de tabelas, jobs e permissões e sinalizou os bloqueadores com uma 'pontuação de prontidão'. Essa visibilidade ajudou a equipe a se concentrar no que era mais importante.

Com tabelas de sistema e percepções de linhagem, a equipe da EDP priorizou os fluxos de trabalho de alto valor, enquanto removia do escopo ~40% dos Jobs legados inativos ou de baixo valor. Essa abordagem de 'primeiro o valor de negócio' manteve a migração gerenciável e alinhada com as prioridades das partes interessadas.

As principais passos incluíram:

• Federação de identidade: migração de grupos locais do workspace para grupos no nível da conta, com o UCX automatizando o mapeamento de permissões, mesmo em hierarquias aninhadas.
• Redesenho da arquitetura Medallion: Remapeando o armazenamento em camadas bronze, silver e ouro durante a migração.
• Migração incremental com sincronização e sincronização reversa: Permitindo que o Hive e o Unity Catalog coexistam durante a transição, minimizando o tempo de inatividade e o risco.

Este guia em fases de avaliar, planejar, migrar, validar e desativar reorientou o projeto de um desafio assustador para uma transformação estruturada.

Governança mais forte e inovação mais rápida com o Databricks Unity Catalog

Com o Unity Catalog implementado, a 7-Eleven simplificou drasticamente a governança e liberou novas capacidades de negócio. Ao eliminar mais de 40% dos fluxos de trabalho redundantes, a equipe racionalizou seu patrimônio de dados e reduziu a sobrecarga operacional. A governança agora é unificada, com registro de auditoria centralizado, segurança detalhada e acompanhamento de linhagem em todos os ativos de dados e AI. A equipe da plataforma gerencia um único conjunto de políticas em vez de vários, melhorando tanto a eficiência quanto a segurança.

Mas os benefícios vão muito além da simplificação. Com um catálogo central, os usuários de todas as unidades de negócios agora podem descobrir e confiar nos ativos de dados, ver como eles se conectam por meio da linhagem e reutilizá-los com confiança em vez de recriar relatórios. A auditabilidade integrada garante que a equipe possa responder a perguntas como “quem consultou o quê” em minutos, não em dias, uma vitória crucial para a conformidade.

A colaboração também acelerou. Cientistas de dados, analistas e engenheiros agora trabalham na mesma plataforma governada, compartilhando dados de forma transparente entre domínios. Essa consistência reduz erros, aumenta a produtividade e libera as equipes para se concentrarem nos resultados de negócios em vez da sobrecarga administrativa.

Além dessas melhorias de governança, o Unity Catalog desbloqueou novas capacidades que impulsionam a inovação nos negócios:

• Delta Sharing e Databricks Clean Rooms potencializam a otimização de marketing e a monetização segura de dados.
• Clusters serverless eliminam o gerenciamento manual de clusters.
• Analítica de autoatendimento com AI/BI Genie Spaces e domínios federados dão às equipes de negócios acesso direto às percepções de que precisam.

Lições da migração da 7-Eleven para o UC

A migração para o UC da 7-Eleven é mais do que uma atualização técnica. É um pilar fundamental da transformação digital deles: simplificando a governança, permitindo a federação entre unidades de negócios e apoiando a inovação em escala.

A migração para o Unity Catalog não foi um projeto do tipo "lift-and-shift", mas sim um reset estratégico. Com o UCX e as tabelas do sistema, ganhamos visibilidade, realizamos nossa migração em fases e reduzimos o débito técnico. Hoje, todos os nossos ativos de dados e IA estão sob um modelo de governança unificado, o que nos dá a confiança e a agilidade para escalar a IA em toda a 7-Eleven. — Ganesh Susarla, Diretor de Arquitetura e Governança, 7-Eleven

Como parte dessa jornada, a equipe da Enterprise Data Platform descobriu várias práticas recomendadas que podem guiar outras empresas que enfrentam migrações complexas:

• Invista em uma avaliação completa e antecipada: O uso do UCX e das tabelas de sistema revelou a dívida técnica precocemente e identificou ativos de baixo valor para remover do escopo, reduzindo o impacto geral da migração.
• Migre identidades e permissões primeiro: estabelecer a governança no nível da conta desde o início criou uma base limpa que simplificou todos os passos posteriores.
• Use a migração como uma oportunidade para modernizar: A equipe adotou uma arquitetura Medallion para reduzir a proliferação, padronizar padrões e eliminar dívidas técnicas de longa data.
• Divida o trabalho em fases para minimizar as interrupções: A sincronização e a sincronização reversa permitiram que o Hive e o Unity Catalog coexistissem durante a transição, garantindo que as operações do dia a dia continuassem ininterruptas.

(Esta publicação no blog foi traduzida utilizando ferramentas baseadas em inteligência artificial) Publicação original