세계 유수의 회계 법인 중 하나인 KPMG의 글로벌 조직은 전 세계 143개 국가 및 지역에서 운영되고 있으며 감사, 세금 및 자문 서비스를 제공합니다. 포춘지 선정 글로벌 500대 기업의 82% 이상과 포브스 글로벌 1000대 기업의 80% 이상에게 서비스를 제공하는 KPMG LLP는 고객에게 고품질의 시기적 절하고 관련성 있는 통찰력을 제공하는 것을 목표로 하고 있습니다. AI 시대에 주도하고 있는 데이터 중심 기업인 KPMG는 기존 하둡 인프라가 증가하는 시장 진출 속도 요구 사항과 급격한 데이터 증가로 인한 엄청난 비용으로 어려움을 겪고 있음을 빠르게 깨달았습니다. KPMG는 데이터 변환, 분석 및 모델 개발 프로세스를 주도하기 위한 핵심 엔진으로 Databricks 데이터 인텔리전스 플랫폼을 선택했습니다. Databricks로 이전한 이후 KPMG는 생산성이 향상되고 출시 기간이 단축되며 규모와 성능이 향상되었습니다.
기존 하둡 아키텍처
는 혁신을 저하시킵니다.143개 이상의 국가에서 사업을 운영하는 전문 서비스 회사인 KPMG International은 감사, 세금 및 자문 서비스를 제공하며 모든 산업 분야의 기업에게 신뢰받는 파트너입니다. KPMG International의 미국 계열사인 KPMG LLP는 4만 명 이상의 직원을 고용하고 있으며 미국 50개 주 모두에 서비스를 제공합니다. KPMG는 모든 업무에서 품질과 우수한 서비스를 제공하기 위해 노력하고 있다는 점을 자랑스럽게 생각합니다. 그럼에도 불구하고 노후된 하둡 인프라스트럭처는 데이터 양과 다양성이 급격히 증가함에 따라 신속하게 출시 할 수 있는 요구 사항을 충족하고 비용을 절감하는 능력을 저해했습니다. 또한 KPMG는 AI에 대한 수요가 증가하고 있음을 이해했으며 빠르게 변화하는 시장의 요구를 충족할 수 있을 만큼 유연하고 개방적이며 민첩한 솔루션이 필요했습니다.미래에 대비할 수 있는 데이터 플랫폼의 필요성을
인식한 KPMG는 2021년 데이터 운영을 온프레미스 관계형 데이터베이스에서 Microsoft Azure로 이전하는 중추적 전환에 착수했습니다. Azure Databricks는 KPMG LLP의 클라우드 데이터 전략의 핵심 기둥입니다. 최고 디지털 사무소의 일환으로 회사의 최신 데이터 플랫폼 제공을 이끌고 있는 데니스 탈리는 “Databricks를 통해 KPMG는 확장 가능하고 탄력적인 레이크하우스 아키텍처를 구축할 수 있었으며, 이는 데이터 변환, 분석 및 AI 워크로드를 지원함으로써 회사 전체에서 새롭게 등장하는 AI 요구 사항을 충족하는 동시에 데이터 통합의 복잡성과 비용을 줄일 수 있었습니다.”라고 설명했습니다.
현재 KPMG는 Databricks를 성공적으로 활용하고 있는 850명 이상의 활성 고급 사용자들로 구성된 강력한 기반을 자랑하며, 이를 통해 최고 디지털 사무소 내부와 재무, 위험 예측, 인적 자원 등 조직 전체의 활용 사례를 지원하고 있습니다. “우리는 진정으로 데이터브릭스를 우리가 하는 모든 일의 기반으로 사용합니다.”라고 탈리는 말합니다.
현대 시대의 원활한 연합 및 데이터 거버넌스
Databricks를 통해 플랫폼을 현대화하기로 선택한 이후로 KPMG는 데이터를 통합하여 다운스트림 분석 및 기계 학습 요구를 쉽게 지원할 수 있었습니다. Unity 카탈로그와 델타 공유를 통해 KPMG는 회사 전체에 존재했던 데이터 사일로를 해체할 수 있었으며, 이를 통해 온프레미스 SQL 서버, 클라우드 데이터 웨어하우스, Azure Data Lake Storage 등 다양한 소스의 데이터를 통합할 수 있었습니다. 이러한 다용성은 수동 데이터 통합의 필요성을 없애주므로 비즈니스 프로젝트의 가치를 더 빨리 실현할 수 있게 해줍니다. 자동으로 캡처되고 업데이트되는 계통을 추가함으로써 프로세스가 더욱 간소화되므로 데이터 자산의 소스와 해당 다운스트림 용도를 보다 쉽게 식별할 수 있습니다. “페더레이션은 우리 전략의 핵심 요소이며, 현재 우리는 Unity 카탈로그를 사용하여 우리 환경 전체의 다양한 데이터 소스를 한 곳에 통합하고 있습니다. 데이터 공유를 통제하는 방식이 그 어느 때보다 쉬워졌습니다.”라고 Tally는 말합니다. Unity 카탈로그의 거버넌스는 KPMG가 모든 작업 공간에 적용되는 데이터 액세스 정책을 관리할 수 있는 단일 장소를 제공합니다. 이제 KPMG는 정책을 한 번 정의하면 호수 저택 전체에 적용할 수 있으므로 액세스 제어 관리가 간소화되어 규정 준수를 준수하고 고객을 더 잘 지원할 수 있습니다. Databricks Unity 카탈로그에서 관리되는 데이터의 양은 현재 500TB를 넘으며 계속 증가하고 있습니다. 이 플랫폼에는 850명 이상의 활성 사용자가 있으며, 수천 명의 플랫폼 고객이 호수집에 수집된 데이터를 기반으로 구축된 Power BI 대시보드를 활용하고 있기 때문에 창출된 가치는 계속 증가하고 있습니다.
Databricks는 KPMG에게 이상적인 거버넌스 솔루션을 제공했을 뿐만 아니라 Databricks SQL을 사용하면 비즈니스 전반의 사용자가 대시보드를 위해 Power BI와 쉽게 통합하면서 규모에 맞게 BI 및 ETL 워크로드를 실행할 수 있습니다. 서버리스 컴퓨팅은 KPMG가 호수에서 Azure 클라우드 인프라를 관리, 구성 또는 확장할 필요가 없도록 해줍니다. 스토리지와 분리된 Databricks SQL Serverless 탄력적 SQL 컴퓨팅이 KPMG LLP의 높은 동시성 사용 사례에 맞게 자동으로 확장되기 때문입니다. 머신 러닝 측면에서 MLflow는 종합적인 MLOPS 플랫폼을 제공하여 ML 모델을 프로덕션에 적용한 다음 해당 모델을 유지 관리 및 모니터링하는 프로세스를 간소화합니다. Unity 카탈로그와 MLflow를 통해 KPMG는 AI의 힘을 활용하여 모니터링을 자동화하고, 오류를 진단하며, 데이터와 ML 모델의 품질을 유지할 수 있으므로, 데이터 과학자들은 참여 위험 평가, 차우수 서비스, 예측과 같은 분야의 혁신에 집중할 수 있습니다.
핵심 데이터 엔지니어링 및 AI 워크로드 외에도 Databricks는 KPMG의 다른 부서의 데이터 과학자와 분석가에게 재무, 성장 및 전략, 위험 분야의 활용 사례를 제공하고 있습니다. KPMG는 Databricks SQL을 사용하여 Power BI를 사용한 재무 및 회계 대시보드 개발을 지원함으로써 기존 데이터 웨어하우징 시스템의 한계를 뛰어넘고 조직에서 접근할 수 있는 가치를 확장합니다. 성장 및 전략 측면에서 볼 때 데이터브릭스 클린 룸을 통해 KPMG는 전체 볼륨 생산 데이터에 대한 액세스를 프로비저닝할 수 있었으며 분석 및 AI의 분산 개발을 위한 일련의 권한 및 엔지니어링 도구도 제공되었습니다. 예를 들어 CDO 팀은 KPMG 위험 부서와 함께 Databricks를 배포하여 KPMG LLP의 계약과 관련된 위험을 평가하고 예측하며, 계약이 고객의 성공을 위해 적절하게 조정되지 않은 경우를 판단하는 모델을 개발하고 있습니다. Databricks는 차세대 AI를 개발하려는 KPMG LLP의 데이터 과학 및 엔지니어링 팀에게 공통의 기회를 제공했습니다.
데이터와 AI
Today를 통해 미래를 앞당기기 위해 KPMG는 조직 전체에서 비즈니스 논리를 실행하기 위한 기본 엔진으로 Azure Databricks에 크게 의존하는 동급 최고의 모던 데이터 플랫폼을 구축했습니다. Databricks를 통해 KPMG는 회사 전체의 모든 데이터와 AI를 통합했습니다. 탈리는 “우리는 처음으로 KPMG의 프런트 오피스 및 백 오피스 전문가들의 역동적인 요구를 지원할 수 있는 진정한 엔터프라이즈 플랫폼을 개발했습니다.”라고 말했습니다. KPMG는 Databricks를 사용하여 생산성을 높이고 출시 시간을 단축하며 규모와 성능을 향상시킬 수 있었습니다. 또한
Databricks를 통해 KPMG는 데이터 및 인공 지능 분야의 업계 선두주자가 되었으며, 이를 통해 데이터베릭스 플랫폼에 완전히 통합된 상황 인식 AI 비서인 Databricks Assistant와 같은 최첨단 생성형 AI 기술을 실험할 수 있었습니다. Databricks Assistant를 사용하면 KPMG 개발자들은 대화형 인터페이스를 통해 자연어를 사용하여 데이터를 쿼리할 수 있습니다. 그런 다음 코드 셀, 라이브러리, 태그, 인기 있는 테이블 및 Unity 카탈로그 스키마의 컨텍스트를 사용하여 해당 SQL 또는 Python 쿼리를 생성합니다.
GenAI와 같은 신기술 시대에 KPMG는 고객에게 최상의 결과를 제공하기 위해 신기술을 활용하는 데 앞으로도 계속 앞장서갈 것입니다. 탈리는 “인공지능은 우리 내부의 운영 방식부터 올바른 툴을 활용하여 참여 팀과 궁극적으로 고객에게 영향을 미칠 수 있는 것까지 계속해서 우리 비즈니스를 지배할 것입니다.”라고 말했습니다. 앞으로도 KPMG는 Databricks 데이터 인텔리전스 플랫폼을 통해 조직 전체에 걸쳐 지속적인 혁신을 계획하고 있습니다. 탈리는 “우리는 다른 기업들의 AI 여정을 이끌고 있는 전문 서비스 조직이며, 이 분야에서 우리가 탁월한 성과를 거두어야 한다는 것은 필수적입니다.”라고 결론지었습니다.