Modèles de données métier lakehouse pour les services financiers et l'assurance

Localisation

Les modèles de données métier Lakehouse constituent la couche Silver. La couche Bronze gère l'ingestion brute (Lakeflow, Auto Loader). La couche Silver correspond au modèle analytique conformé et normalisé dans lequel puisent chaque analyste, chaque outil de BI et chaque workload ML. La couche Gold est composée d'insights dérivés (tables de KPI, tables de caractéristiques, agrégats) calculés à partir de la couche Silver.

Contenu de chaque modèle

Chaque modèle est publié sous la forme d'un paquet complet et gouverné. « model.json » est le modèle logique ; il contient l'ensemble des domaines, sous-domaines, produits, attributs, clés étrangères, étiquettes de classification et définitions de vue de métrique. Vous pouvez l'enregistrer dans Git, comparer les différentes versions et le partager entre plusieurs environnements. Le paquet comprend également un déploiement Unity Catalog (schémas, tables Delta, contraintes de clé primaire et étrangère, et balises de classification), des vues de métriques réutilisables pour les tableaux de bord AI/BI et AI/BI Genie, un graphe de connaissances RDFS (ontology/) pour l'outillage sémantique et l'ancrage des agents IA, un diagramme DBML (diagram/), du DDL SQL (schemas/), une documentation Excel et Markdown, et, en option, des données d'exemple synthétiques qui respectent l'ensemble des clés étrangères, des contraintes regex et des balises de classification.

Hiérarchie

Chaque modèle suit la même hiérarchie. L'organisation représente l'ensemble de l'entreprise et contient trois divisions : Operations (ce que l'entreprise fait physiquement), Business (qui elle sert et comment elle génère des revenus) et Corporate (le back-office de soutien). Chaque division contient des domaines (contextes délimités uniques, désignés par un seul mot en minuscules). Chaque domaine contient au moins deux sous-domaines, qui hébergent des produits (tables Delta). Enfin, chaque produit contient des attributs (colonnes), dont les types de données et les étiquettes de classification sont attribués au départ. Les divisions Operations et Business représentent toujours au moins 80 % des domaines ; la division Corporate est plafonnée à 20 %. De par sa construction, chaque modèle est un graphe orienté acyclique : les clés étrangères pointent toujours de l'enfant vers le parent, les cycles sont interrompus avant publication et chaque domaine se connecte à au moins un autre, pour que l'analytique inter-domaines soit toujours possible.

Deux périmètres : MVM et ECM

Chaque modèle est proposé dans deux variantes de périmètre qui possèdent la même profondeur d'attributs. Le MVM (modèle viable minimum) représente de 30 à 50 % du nombre de tables ECM et ne couvre que les fonctions métier essentielles. Il est dimensionné pour les déploiements en PME, les projets pilotes et les environnements de développement/test. L'ECM (modèle à couverture étendue) assure une couverture complète pour l'entreprise et prend en charge les domaines Corporate ; ses dimensions sont adaptées aux déploiements de type Fortune 100. Le MVM n'est pas un squelette de l'ECM ; il présente simplement une surface réduite. Commencez avec un MVM et passez à l'ECM quand vos besoins évoluent.

Offres dédiées aux services financiers et à l'assurance

Dédiés aux services financiers et à l'assurance, les modèles suivants sont disponibles dès maintenant en tant que MVM ou ECM (les chiffres indiquent le nombre de domaines/produits) : banque : 19/501 (ECM), 17/227 (MVM) ; paiements et fintech : 18/546 (ECM), 15/223 (MVM) ; assurance santé : 19/409 (ECM), 15/189 (MV%) ; assurance vie : 19/468 (ECM), 15/217 (MVM). L'exemple présenté est le modèle Banque.

Démarrer

La bibliothèque se trouve dans le dépôt Databricks Industry Solutions. Choisissez un modèle, un périmètre (MVM ou ECM), un style de catalogage et un catalogue de déploiement, puis exécutez le notebook d'installation en ciblant le secteur et le périmètre qui vous intéressent. L'installation d'un MVM se fait généralement en quelques dizaines de minutes. Vous obtenez une couche Silver entièrement déployée dans Unity Catalog avec des vues de métriques prêtes pour les tableaux de bord d'AI/BI et AI/BI Genie. Chaque modèle est un point de départ : les clients peuvent l'adapter (en renommant des domaines, en fusionnant ou en scindant des produits, en ajoutant un domaine manquant ou en modifiant les conventions de nommage) à l'aide de l'agent de modélisation, qui produit des itérations du modèle sur la base de directives en langage naturel.