Modelli di dati aziendali Lakehouse per i servizi finanziari e le assicurazioni

Dove si colloca

Un modello di dati aziendali Lakehouse è il livello Silver. Il livello Bronze gestisce l'ingestione dei dati grezzi (Lakeflow, Auto Loader). Il livello Silver è il modello analitico standardizzato e normalizzato da cui leggono tutti gli analisti, gli strumenti di BI e i carichi di lavoro ML. Il livello Gold raccoglie insight derivati, come tabelle KPI, tabelle delle feature e aggregazioni calcolate a partire dal livello Silver.

Cosa include ciascun modello

Ogni modello viene pubblicato come un pacchetto completo e governato. model.json è il modello logico che acquisisce ogni definizione di dominio, sottodominio, prodotto, attributo, chiave esterna, tag di classificazione e vista metrica, pronto per il commit su Git, il confronto di versioni e la condivisione tra i vari ambienti. Il pacchetto include anche una distribuzione di Unity Catalog (schemi, tabelle Delta, vincoli di chiave primaria e chiave esterna e tag di classificazione), viste di metriche riutilizzabili per dashboard AI/BI e AI/BI Genie, un grafo della conoscenza RDFS (ontology/) per strumenti semantici e il grounding degli agenti AI, un diagramma DBML (diagram/), il DDL SQL (schemas/), documentazione in formato Excel e Markdown e, facoltativamente, dati sintetici di esempio conformi a tutti i vincoli di chiave esterna, ai vincoli basati su espressioni regolari e ai tag di classificazione.

Gerarchia

Ogni modello segue la stessa gerarchia. L'organizzazione rappresenta l'intera azienda, composta da tre divisioni: Operations (ciò che l'azienda fa fisicamente), Business (a chi si rivolge e come guadagna) e Corporate (il back office di supporto). Ogni divisione contiene domini (contesti delimitati espressi con una sola parola, in minuscolo e al singolare); ogni dominio contiene due o più sottodomini; ogni sottodominio contiene prodotti (le tabelle Delta); ogni prodotto contiene attributi (le colonne), con tipi di dati e tag di classificazione assegnati in anticipo. Insieme, Operations e Business contengono sempre almeno l'80% dei domini, mentre Corporate è limitato al 20%. Ogni modello è per costruzione un grafo aciclico diretto: le chiavi esterne puntano sempre da figlio a genitore, i cicli vengono interrotti prima della pubblicazione e ogni dominio si collega ad almeno un altro, rendendo sempre possibile l'analisi cross-domain.

Due ambiti: MVM ed ECM

Ogni modello è disponibile in due versioni, entrambe con lo stesso livello di dettaglio degli attributi. L'MVM (Minimum Viable Model) include dal 30 al 50% del numero di tabelle dell'ECM e copre solo le funzioni aziendali essenziali. È dimensionato per progetti destinati a PMI, progetti pilota e ambienti di sviluppo e test. L'ECM (Expanded Coverage Model) offre una copertura aziendale completa, inclusi i domini Corporate di supporto, ed è dimensionato per implementazioni in aziende Fortune 100. L'MVM non è una struttura ridotta all'osso; semplicemente, ha un ambito più ristretto. Si può iniziare con l'MVM e passare all'ECM man mano che le esigenze aumentano.

Modelli disponibili per i servizi finanziari e le assicurazioni

Al momento, sono disponibili i seguenti modelli per i servizi finanziari e le assicurazioni, ciascuno nelle versioni MVM o ECM (domini ECM/prodotti ECM rispetto a domini MVM/prodotti MVM): Settore bancario — 19/501 rispetto a 17/227; Pagamenti e fintech — 18/546 rispetto a 15/223; Assicurazione sanitaria — 19/409 rispetto a 15/189; Assicurazione sulla vita — 19/468 rispetto a 15/217. L'esempio in evidenza è il modello per i servizi bancari.

Comincia

La libreria si trova nel repository Databricks Industry Solutions. Scegli un modello, un ambito (MVM o ECM), uno stile di catalogazione e un catalogo di distribuzione, quindi esegui il notebook di installazione per il settore e l'ambito desiderati. Una tipica installazione MVM si completa in qualche decina di minuti. Il risultato è un livello Silver completamente distribuito in Unity Catalog con viste metriche pronte per le dashboard AI/BI e AI/BI Genie. Ogni modello è un punto di partenza: i clienti possono adattarlo (rinominare domini, unire o dividere prodotti, aggiungere un dominio mancante, modificare le convenzioni di denominazione) utilizzando il Modeling Agent, che itera il modello attraverso direttive in linguaggio naturale.