소매 데이터 거버넌스 변혁: Unity Catalog와 함께하는 Groupement Mousquetaires의 여정

프랑스, 벨기에, 포르투갈, 폴란드에 4,300개 이상의 매장을 보유한 Groupement Mousquetaires는 식료품 체인, 홈 개선 매장, 자동차 서비스 센터를 포함한 다양한 포트폴리오를 가진 프랑스의 주요 소매 그룹 중 하나입니다.

La Stime은 우리의 정보 시스템 부서로, 매장 운영과 물류부터 공급업체 성능까지 고객 여정의 모든 단계를 지원하는 데 중요한 역할을 합니다. La Stime 내에서 DataLab 팀은 우리의 데이터 전략과 구현을 주도하며, 정보를 중요한 비즈니스 결정을 위한 실행 가능한 통찰력으로 전환합니다.

우리는 데이터 기반 의사결정의 초기 채택자로서 2019년에 중앙집중식 DataHub를 출시했습니다. 이 프로젝트는 고객 데이터를 360°로 통합하고, 브랜드 간 연구 및 개발을 가능하게 하며, 더욱 똑똑한 운영과 결정을 내리는 데 목표를 두었습니다.

DataHub의 핵심은 Databricks입니다. 그들의 종합적인 데이터 인텔리전스 플랫폼은 우리의 발전하는 생태계 전반에 걸쳐 데이터 거버넌스를 강화했습니다. Unity 카탈로그를 통해 우리 팀은 이제 데이터의 전체 가치를 활용하여 수익과 혁신을 추진할 수 있습니다.

분산된 데이터의 도전

Unity Catalog 도입 전에는 대규모 데이터를 관리하는 데 상당한 어려움을 겪었습니다. 거의 700개의 Databricks 작업 공간이 있는 복잡한 환경에서는 각 작업 공간에서 사용자 접근 권한과 권한을 수동으로 관리해야 했습니다. 이는 장기적으로 유지하기에는 시간이 많이 소요되는 과정이었습니다.

이 분산 접근 방식은 감독을 희생하거나 팀을 늦추지 않고 신뢰할 수 있는 "골드 데이터"에 대한 자체 서비스 접근을 제공하는 것이 어렵게 만들었습니다. 올바른 데이터를 찾고, 일관된 보안 정책을 적용하고, 팀 간 협업을 가능하게 하는 것이 점점 더 어려워졌습니다. 통합된 거버넌스 프레임워크 없이 데이터 사용은 널리 다양하고 통제하기 어려웠습니다.

데이터 보호 표준, 즉 일반 데이터 보호 규정(RGPD) - GDPR의 프랑스 버전 -을 준수하는 것은 특히 개발 및 테스트 과정에서 중앙 집중식 제어가 부족하여 준수 위험이 발생하는 동안 어려웠습니다.

이미 새로운 데이터 제품에 대해 Unity Catalog를 채택했지만, 기존 작업 부하를 이전하는 것이 필수적이라는 것을 빠르게 깨달았습니다. 이것은 엄청난 과제처럼 느껴졌지만, 접근성을 간소화하고, 거버넌스를 개선하며, 지속 가능한 성장을 위한 위치를 마련할 것을 약속했습니다.

신뢰할 수 있는 파트너십으로 데이터 거버넌스 재구축

소매업에서는 시기가 모든 것입니다. 생각해보세요 - 타겟팅된 프로모션, 재고 업데이트, 소셜 미디어 마케팅 트렌드 및 고객 감정. 모든 것은 눈 깜짝할 사이에 바뀔 수 있습니다. 그래서 소매업자들은 신뢰할 수 있고 접근 가능한 데이터가 필요합니다. 결국, 이 필요성은 우리가 Groupement Mousquetaires의 브랜드 가족 전반에 걸쳐 데이터를 어떻게 관리하고 거버넌스하는지 재고하는 데 이끌었습니다.

우리는 우리가 어디에 있는지 파악하기 위해 시작했습니다 - 우리의 기존 아키텍처에 대한 깊은 탐구. 수백 개의 Databricks 작업 공간이 브랜드, 국가, 팀 간에 사용되면서 우리의 데이터 환경은 점점 복잡해지고 관리하기 어려워졌습니다. 우리의 매장 운영자와 공급망 분석가부터 전자상거래 팀까지 모두가 데이터에 접근할 필요가 있었습니다. 그러나, 그러한 접근을 안전하고 일관되게 얻는 것은 주요한 장애물이었습니다.

기초를 표준화하고 계획을 세우기

그래서, 우리는 기본으로 돌아갔습니다. 우리가 현재의 아키텍처를 매핑하고 그것을 카탈로그, 스키마, 테이블의 데이터 명명 방식을 포함한 표준 세트를 정의하는 데 사용하면, 우리는 그것을 구조화하고 공유할 수 있었습니다. 다음으로, 우리는 Databricks의 전문 서비스 팀과 긴밀하게 협력하여 우리의 데이터를 이전하고 가장 중요한 데이터 제품을 Unity 카탈로그로 가져오는 기술 전략을 설계했습니다.

거기서부터, 우리 IT 팀은 모든 수집 및 처리 파이프라인을 업데이트하는 내부적인 이니셔티브를 주도하여, 데이터가 Unity Catalog에 직접 게시되도록 보장했습니다. 이로써 단일하고 신뢰할 수 있는 접근 포인트가 생성되었습니다.

우리의 비즈니스 스쿼드(데이터 엔지니어, DevOps, 제품 소유자로 구성)는 그들이 관리하는 데이터 제품을 이전하는 것을 맡았습니다. IT의 명확한 지침과 지원을 받아, 각 스쿼드의 마이그레이션은 더 큰 롤아웃 캠페인에서 추적 가능한 이정표가 되었습니다.

파일럿, 플레이북 및 진행 상황

성공을 보장하기 위해, 우리는 Databricks Delivery Solutions Architect와 긴밀하게 협력하면서 세 가지 테스트 마이그레이션을 진행했습니다. 그들의 깊은 전문 지식은 우리 팀에게 중요한 벤치마크와 모범 사례를 설정하는 데 도움이 되었습니다. 또한, 우리와 비슷한 마이그레이션을 진행하는 다른 대형 조직들과 연결하여, 접근 방식을 개선하는 데 도움이 되는 통찰을 교환했습니다.

이러한 초기 노력에서 우리는 실질적이고 불필요한 부분이 없는 마이그레이션 플레이북을 만들었습니다. 이것은 우리의 계획 회의의 중추가 되어, 팀들이 더 넓은 로드맵을 염두에 두고 그들의 노력을 우선 순위로 정하는 데 도움이 되었습니다. 필드 엔지니어링 전문가를 포함한 Databricks 팀과 함께, 우리는 기술적 준비를 중점으로 하고 통합이 가장 영향력있을 활성 개발 파이프라인을 우선 순위로 하는 전략적인 롤아웃 계획을 개발했습니다.

위험을 줄이기 위해, 우리는 중요한 비즈니스 이니셔티브와 마이그레이션을 연결하는 것을 피했습니다. 가장 중요한 것은, 6개월 이내에 단계적으로 중단될 가능성이 있는 데이터 제품을 우선 순위에서 제외했습니다.

이 협력적이고 체계적인 접근 덕분에, 우리는 이전을 간소화하고 혼자서 할 수 있었던 것보다 효율적으로 확장할 수 있었습니다. 강력한 기반, 초기 승리로부터 명확한 비즈니스 가치, 그리고 팀 간의 지속적인 조정을 통해, 우리는 이제 2025년까지 모든 Databricks 작업에 Unity Catalog를 100% 도입할 수 있을 것으로 예상하고 있습니다.

더 나은 데이터 통합과 거버넌스의 결과

Unity Catalog의 채택은 Groupement Mousquetaires의 데이터 거버넌스를 근본적으로 변화시켰습니다. 우리는 비즈니스 전반에 걸쳐 더 똑똑하고 빠른 의사결정을 가능하게 하는 중앙 집중식, 안전하고 협업적인 데이터 환경을 만들었습니다. 하지만 우리에게 Unity Catalog는 단지 거버넌스 도구를 넘어 전략적인 활성화 도구입니다. 이것은 원활한 데이터 공유를 가능하게 하고, 운영적 민첩성을 향상시키며, 미래의 데이터 수익화를 위한 토대를 마련합니다.

앞으로, 우리는 이것을 유럽 소매 시장에서 중요한 차별화 요소로 보고 있습니다 - 각 브랜드를 더 데이터 중심적이고, 반응적이고, 경쟁력 있는 힘으로 발전시키는 데 도움이 될 것입니다.

(이 글은 AI의 도움을 받아 번역되었습니다. 원문이 궁금하시다면 여기를 클릭해 주세요)