Che cos'è Unified Data Warehouse?
Un'architettura moderna che combina le funzionalità di data warehouse e data lake con governance unificata, transazioni ACID e supporto per carichi di lavoro SQL e ML
Summary
- Unisce l'analisi strutturata tradizionale del data warehouse con la flessibilità del data lake per dati non strutturati, eliminando la necessità di sistemi separati e duplicazione dei dati.
- Fornisce transazioni ACID sui data lake utilizzando formati come Delta Lake, consentendo aggiornamenti, eliminazioni e viaggi nel tempo affidabili, mantenendo al contempo la qualità e la coerenza dei dati.
- Supporta la governance unificata tramite cataloghi come Unity Catalog, consentendo ad analisti SQL, data engineer e data scientist di lavorare sugli stessi set di dati con la sicurezza adeguata.
Che cos'è un data warehouse unificato?
Un data warehouse unificato, o data warehouse aziendale, raccoglie tutte le informazioni di un'azienda e le rende accessibili a tutta l'organizzazione. La maggior parte delle aziende oggi gestisce i propri dati in silos isolati e i vari team interni utilizzano diversi strumenti di gestione dei dati per vari tipi di operazioni inerenti, ad esempio, qualità, integrazione e governance dei dati, gestione dei metadati e dei dati master, scambio di dati B2B o amministrazione e architettura dei database. L'adozione di DW aziendali nelle grandi realtà è diventata una best practice per l'archiviazione di dati integrati e centralizzati estratti dalle più disparate fonti di dati operativi. In questo modo, è possibile eseguire query complesse senza entrare in conflitto con le attività transazionali dei sistemi operazionali.
L'architettura tipica di un DW consiste in diversi componenti; i dati vengono passati da un componente all'altro dopo che su di essi state eseguite alcune operazioni fondamentali. La struttura di un data warehouse unificato è costituita da un sottoinsieme dei componenti contenuti nell'architettura del data warehouse, ovvero: le sorgenti di dati, il core DW, i data mart, i processi di estrazione, trasformazione e caricamento (ETL) e i repository di metadati. Il vantaggio più importante del data warehousing unificato deriva dal fatto che tutti i dati sono raggruppati in un unico archivio centrale. Di conseguenza, non c'è bisogno di analizzare i dati separatamente per convertirli in informazioni utili al fine di facilitare un miglior processo decisionale.
Gartner®: Databricks leader dei database cloud
Vantaggi offerti da un data warehouse unificato:
- I data warehouse offrono un ulteriore supporto ai dati, in quanto sono progettati per tracciare, gestire e analizzare le informazioni, fornendo un ambiente ideale per il supporto alle decisioni, il reporting analitico e il data mining.
- Un data warehouse unificato lavora fianco a fianco con altri programmi analitici per promuovere la crescita dell'azienda.
- Tutti i dati dell'azienda sono costantemente disponibili per l'analisi e la pianificazione.
- Gli utenti possono archiviare grandi quantità di dati con un'ampia varietà di parametri. Questi dati possono provenire da più fonti, di solito non correlate tra loro.
- Un data warehouse unificato ha la capacità di affinare i dati, eliminando le informazioni ridondanti e aumentando la qualità complessiva.
- Consente di ridurre al minimo la manipolazione dei dati mantenendo l'integrità ai massimi livelli.
- Fornisce informazioni migliorate e aggiornate.