Qu'est-ce qu'un entrepôt de données unifié ?
Une architecture moderne combinant les capacités d'un entrepôt de données et d'un lac de données avec une gouvernance unifiée, des transactions ACID et la prise en charge des charges de travail SQL et ML.
Summary
- Fusionne l'analyse structurée des entrepôts de données traditionnels avec la flexibilité des lacs de données pour les données non structurées, éliminant ainsi le besoin de systèmes distincts et la duplication des données.
- Fournit des transactions ACID sur les lacs de données à l'aide de formats tels que Delta Lake, permettant des mises à jour, des suppressions et des accès au temps fiables tout en préservant la qualité et la cohérence des données.
- Prend en charge une gouvernance unifiée grâce à des catalogues comme Unity Catalog, permettant aux analystes SQL, aux ingénieurs de données et aux data scientists de travailler sur les mêmes ensembles de données avec une sécurité appropriée.
Qu'est-ce qu'un data warehouse unifié ?
Une base de données unifiée, ou data warehouse d'entreprise, contient toutes les informations commerciales d'une organisation et les met à la disposition de l'ensemble des équipes. La plupart des entreprises entreposent aujourd'hui leurs données dans des silos. Les différentes équipes d'une même organisation n'emploient pas les mêmes outils pour gérer la qualité des données, leur intégration, la gouvernance, les métadonnées et les données principales, mais aussi l'échange de données B2B, l'administration et l'architecture des données, etc. Dans les grandes entreprises, l'adoption d'un data warehouse s'est imposée comme une bonne pratique pour stocker des données intégrées et centralisées, provenant de sources opérationnelles disparates. Cette approche permet d'exécuter des requêtes complexes sans créer de conflit avec les opérations transactionnelles des systèmes opérationnels.
L'architecture d'un DW classique comprend différents composants que les données traversent en subissant des opérations critiques. La structure d'un data warehouse unifié repose sur un sous-ensemble des composants de l'architecture du data warehouse : sources de données, DW central, data marts, processus ETL (extraction, transformation et chargement) et dépôt de métadonnées. Le principal avantage du data warehouse unifié est qu'il rassemble toutes les données au sein d'un même système. Il n'est donc plus nécessaire d'analyser les données séparément pour les convertir en informations exploitables, utiles pour améliorer le processus de décision.
Gartner® : Databricks, leader des bases de données cloud
Les avantages du data warehouse unifié :
- Parce qu'ils sont conçus pour suivre, gérer et analyser l'information, les data warehouses offrent une meilleure prise en charge des données et un excellent environnement pour appuyer la prise de décision, produire des rapports analytiques et explorer les données.
- Le data warehouse unifié s'intègre étroitement à d'autres programmes analytiques pour favoriser la croissance de l'entreprise.
- Toutes les données de l'entreprise sont constamment accessibles à des fins d'analyse et de planification.
- Les utilisateurs peuvent stocker de grands volumes de données avec un large éventail de paramètres. Ces données peuvent provenir de sources diverses et généralement indépendantes les unes des autres.
- Le data warehouse unifié peut affiner les données et éliminer les informations redondantes, tout en améliorant la qualité globale des données.
- Il réduit au minimum la manipulation des données et protège strictement leur intégrité.
- Délivre des informations riches et à jour.