Como uma das principais empresas de contabilidade do mundo, a organização global KPMG opera em 143 países e territórios em todo o mundo, oferecendo serviços de auditoria, tributação e consultoria. Atendendo a mais de 82% da Fortune Global 500 e mais de 80% da Forbes Global 1000, a KPMG LLP tem como missão fornecer insights de alta qualidade, oportunos e relevantes para seus clientes. Como uma organização orientada por dados e que transita pela era da IA, a KPMG rapidamente percebeu que sua infraestrutura Hadoop legada enfrentava dificuldades com os crescentes requisitos de velocidade de lançamento no mercado e os custos proibitivos devido ao rápido crescimento da quantidade de dados. A KPMG recorreu à Databricks Data Intelligence Platform como o mecanismo central para impulsionar seus processos de transformação de dados, análise e desenvolvimento de modelos. Desde que migrou para a Databricks, a KPMG observou maior produtividade, menor tempo de lançamento no mercado e maior escala e desempenho.
A arquitetura Hadoop legada atrasa a inovação
Como uma empresa de serviços profissionais que opera em mais de 143 países, a KPMG International é uma parceira confiável para empresas em todos os setores, oferecendo serviços de auditoria, tributação e consultoria. A KPMG LLP, a firma-membro americana da KPMG International, emprega mais de 40.000 pessoas e atende todos os 50 estados dos EUA. A KPMG orgulha-se de seu compromisso com a qualidade e a excelência no serviço em tudo o que faz. Ainda assim, uma infraestrutura Hadoop envelhecida impediu sua capacidade de atender aos requisitos de velocidade de lançamento no mercado e manter os custos baixos com o rápido crescimento dos volumes e da variedade de dados. Além disso, a KPMG entendeu as crescentes demandas de IA e precisava de uma solução flexível, aberta e ágil o suficiente para atender às necessidades de um mercado em rápida evolução.
Vendo a necessidade de preparar sua plataforma de dados para o futuro, a KPMG embarcou em uma transição crucial em 2021 para mover suas operações de dados de bancos de dados relacionais locais para o Microsoft Azure, com o Azure Databricks como um pilar central da estratégia de dados na nuvem da KPMG LLP. Dennis Tally, que lidera a entrega de uma plataforma de dados moderna da empresa como parte de seu Diretor Digital Office, explicou: "A Databricks permitiu que a KPMG construísse uma arquitetura de lakehouse escalável e resiliente, potencializando transformação de dados, análises e cargas de trabalho de IA para atender aos nossos requisitos emergentes de IA em toda a empresa, ao mesmo tempo que reduz a complexidade e os custos de integração de dados".
Atualmente, a KPMG possui uma base sólida de mais de 850 usuários avançados ativos que utilizam com sucesso a Databricks, apoiando casos de uso dentro do Chief Digital Office e em toda a organização em áreas como finanças, previsão de riscos e recursos humanos. "Realmente usamos a Databricks como base para tudo o que fazemos", disse Tally.
Federação e governança de dados perfeitas na era moderna
Desde que optou por modernizar sua plataforma com a Databricks, a KPMG conseguiu federar seus dados para atender facilmente às necessidades de análises downstream e machine learning. O Unity Catalog e o Delta Sharing permitiram à KPMG quebrar silos de dados que existiam em toda a empresa, permitindo a federação de dados de uma variedade de fontes, incluindo servidores SQL locais, data warehouses em nuvem e Azure Data Lake Storage. Essa versatilidade permite um tempo de retorno mais rápido para projetos de negócios, pois elimina a necessidade de integração manual de dados. A adição da linhagem capturada e atualizada automaticamente simplifica ainda mais o processo, facilitando a identificação das fontes dos ativos de dados e seu uso downstream. "A federação é um pilar fundamental em nossa estratégia, e atualmente estamos usando o Unity Catalog para federar diferentes fontes de dados em um só local em produção em todos os nossos ambientes. O compartilhamento governado de dados nunca foi tão fácil", disse Tally. A governança do Unity Catalog oferece um local único para a KPMG administrar políticas de acesso a dados que se aplicam a todos os workspaces. A KPMG agora pode definir suas políticas uma vez, e elas serão aplicadas em todo o lakehouse, simplificando o gerenciamento dos controles de acesso, o que ajuda a atender à conformidade regulamentar e atender melhor aos clientes. A quantidade de dados gerenciados no Databricks Unity Catalog atualmente excede 500 TB. Com mais de 850 usuários ativos na plataforma, o valor criado continua a crescer, com milhares de clientes adicionais da plataforma utilizando painéis do Power BI criados com base em dados ingeridos no lakehouse.
Além de fornecer uma solução de governança ideal para a KPMG, o Databricks SQL permite que usuários de toda a empresa executem cargas de trabalho de BI e ETL em escala e, ao mesmo tempo, se integram facilmente ao Power BI para criação de painéis. O serverless compute elimina a necessidade de a KPMG gerenciar, configurar ou dimensionar sua infraestrutura de nuvem Azure no lakehouse, já que o compute SQL elástico do Databricks SQL Serverless — dissociado do armazenamento — escala automaticamente para os casos de uso de alta concorrência da KPMG LLP. Na frente do machine learning, o MLflow fornece uma plataforma de MLOps de ponta a ponta, simplificando o processo de levar modelos de ML para produção e, em seguida, manter e monitorar esses modelos. Com o Unity Catalog e o MLflow, a KPMG pode aproveitar o poder da IA para automatizar o monitoramento, diagnosticar erros e manter a qualidade dos dados e do modelo ML, liberando data scientists para se concentrarem na inovação em áreas como avaliação de risco de engajamento, próximo melhor serviço e previsões.
Além da engenharia de dados central e cargas de trabalho de IA, a Databricks também atende data scientists e analistas em outros departamentos da KPMG com casos de uso em finanças, crescimento e estratégia e risco. A KPMG usa o Databricks SQL para apoiar o desenvolvimento de painéis financeiros e contábeis usando o Power BI, indo além das limitações dos sistemas de data warehousing legados e expandindo o valor acessível para a organização. No lado do crescimento e da estratégia, o Databricks Clean Rooms possibilitou que a KPMG oferecesse acesso a dados de produção em volume total e um conjunto de ferramentas de engenharia e privilégios para o desenvolvimento distribuído de análises e IA. Por exemplo, a equipe de CDO está implantando a Databricks com a organização de risco da KPMG para desenvolver modelos que avaliem e preveam o risco associado aos engajamentos da KPMG LLP e determinem quando os engajamentos não estão alinhados adequadamente para o sucesso do cliente. A Databricks forneceu um campo de atuação comum para as equipes de data science e engenharia da KPMG LLP que buscam desenvolver a próxima geração de IA.
Acelerando em direção ao futuro com dados e AI
Today, a KPMG criou uma plataforma de dados moderna de ponta que depende muito do Azure Databricks como o mecanismo subjacente para executar a lógica de negócios em toda a organização. Com a Databricks, a KPMG unificou todos os seus dados e IA em toda a empresa. Tally disse: "Pela primeira vez, criamos uma verdadeira plataforma corporativa capaz de atender às necessidades dinâmicas de nossos profissionais de front e back office na KPMG." Ao usar a Databricks, a KPMG observou maior produtividade, menor tempo de lançamento no mercado e maior escala e desempenho.
A Databricks também permitiu que a KPMG se tornasse líder do setor em dados e inteligência artificial, permitindo que a empresa experimentasse tecnologias de ponta de IA generativa, como o Databricks Assistant, um assistente de IA com reconhecimento de contexto totalmente integrado à Databricks Platform. O Databricks Assistant permite que os desenvolvedores da KPMG consultem dados usando linguagem natural por meio de sua interface de conversação. Em seguida, ele gera as queries SQL ou Python correspondentes usando contexto de células de código, bibliotecas, tags, tabelas populares e esquemas do Unity Catalog.
Na era de novas tecnologias como a GenAI, a KPMG continuará a estar na vanguarda do aproveitamento de tecnologias emergentes para garantir os melhores resultados para seus clientes. Tally declarou: “A IA continuará a dominar nossos negócios, desde a forma como nos administramos internamente até o aproveitamento das ferramentas certas para gerar impacto para nossas equipes de engajamento e, em última análise, para nossos clientes.” Olhando para o futuro, a KPMG tem planos para inovações contínuas em toda a sua organização com a Databricks Data Intelligence Platform. “Somos uma organização de serviços profissionais liderando outras empresas em sua jornada de IA, e é fundamental que nos destaquemos nesse domínio”, concluiu Tally.