Unity Catalog è una soluzione di governance unificata per tutte le risorse di dati, inclusi file, tabelle, modelli di machine learning e dashboard, presenti nel lakehouse aziendale su qualsiasi cloud.
“Unity Catalog distills permissioning into its important pieces by removing the complexity introduced by IAM policies and other data control platforms, allowing us to focus on what is important to our business use case.”
— Joseph Kesting, Software Engineer
Come funziona
Gestione e governance centralizzate del patrimonio di dati
Un modello di governance comune basato sullo standard aperto ANSI SQL consente di semplificare la governance di file, tabelle, dashboard e modelli ML su qualsiasi cloud. Le politiche di accessi possono essere definite una sola volta a livello di account e poi applicate a tutti i carichi e gli spazi di lavoro. Unity Catalog consente inoltre revisioni granulari centralizzate attraverso l'acquisizione di un registro delle operazioni svolte sui dati, aiutando a rispettare i requisiti di conformità e audit.
Gestire il controllo granulare degli accessi
L'uso di funzioni SQL standard consente di definire filtri e maschere di colonne per controllare in modo granulare l'accesso a righe e colonne. Mentre Databricks continua a sviluppare funzionalità per migliorare la scalabilità e l'integrazione, i controlli di accesso basati su attributi, che verranno introdotti a breve, consentiranno di definire politiche di accesso basate su tag personalizzati (attributi).
Esperienza di ricerca dei dati unificata e sicura
Gli utenti possono trovare, comprendere e fare riferimento a dati rilevanti su tutto il patrimonio di dati, con un'esperienza di ricerca unificata per analisti, data engineer e data scientist. La ricerca di dati in Unity Catalog è sicura per definizione, poiché i risultati delle ricerche sono limitati in base ai privilegi di accesso di ciascun utente, con un ulteriore livello di sicurezza per la privacy.
Prestazioni di query migliorate per qualsiasi volume di dati
Unity Catalog migliora le prestazioni delle query grazie alla fornitura di dati con bassa latenza e al perfezionamento automatico (auto-tuning) delle tabelle, velocizzando l'esecuzione delle query su qualsiasi volume di dati. La compattazione automatica asincrona dei dati ottimizza le dimensioni dei file e riduce automaticamente la latenza di input/output (I/O) in background.
“Unity Catalog ci ha aiutato a semplificare la gestione dei dati e i controlli di accesso in tutta l'azienda. Il team di gestione dei dati di Compass ha portato a bordo in piena sicurezza oltre 100 sorgenti di dati, ha migrato tutti gli spazi di lavoro su Unity Catalog e ha creato un livello Gold a cui tutte le figure interessate possono accedere, attingendo a informazioni approfondite su clienti, utilizzo, ricavi e altro ancora: un'unica fonte della verità con controlli di accesso completi per tutta l'azienda.”
“Unity Catalog ha rappresentato una vera e propria svolta. I nostri analisti possono accedere a tabelle esterne AWS in tempo reale negli spazi di lavoro di Databricks e unirle con tabelle Delta Lake. In questo modo possiamo avere i vantaggi in termini di prestazioni di Databricks SQL senza dover migrare le tabelle Glue. Con Unity Catalog, diversi team possono collaborare senza spostare i dati da un posto all'altro.”
Integrazioni perfette con gli strumenti esistenti
Unity Catalog funziona con i cataloghi di dati, i sistemi di archiviazione dei dati e le soluzioni di governance esistenti in modo da poter sfruttare gli investimenti esistenti e creare un modello di governance a prova di futuro senza costosi costi di migrazione.
