Ultime novità per il Data Sharing e la collaborazione sul lakehouse

Databricks offre il primo approccio open-source alla Data Sharing e collaborazione tra dati, analitiche e AI. I clienti possono condividere set di dati live, così come modelli di AI, applicazioni e Notebook, su più piattaforme, cloud e aree geografiche senza vendor lock-in. Accelera l'innovazione e genera nuovi flussi di ricavi grazie a maggiori opportunità per la fornitura di prodotti di dati trasformativi. Questa flessibilità viene garantita insieme a una sicurezza e una governance solide integrando Delta Sharing con Databricks Unity Catalog per governare, tracciare e revisionare l'accesso a set di dati condivisi. Siamo entusiasti di annunciare nuove funzionalità per potenziare la Lakehouse Collaboration Platform. Siamo entusiasti di annunciare che Databricks sta espandendo il nostro ecosistema Delta Sharing con nuovi partner, la disponibilità generale di Databricks Marketplace e le Databricks Clean Rooms in Private Preview su AWS.

Accelera Data Sharing con Delta Sharing

Due anni fa abbiamo avviato il progetto open-source Delta Sharing. Il primo protocollo aperto del settore per la condivisione sicura di Data Sharing. Dal suo lancio, molte organizzazioni stanno adottando Delta Sharing. Oltre 6.000 organizzazioni fanno utilizzo dei dati tramite Delta Sharing. Oltre 300 petabyte di dati vengono condivisi ogni giorno tramite Delta Sharing su Databricks. Si tratta di dati che vengono letti ed elaborati tra più organizzazioni. Mentre molte altre soluzioni dei fornitori creano un lock-in, abbiamo riscontrato un incredibile slancio tra i clienti che utilizzano Delta Sharing. Le aziende possono condividere e utilizzare i dati da qualsiasi piattaforma o fornitore che supporti il protocollo aperto Delta Sharing. Grazie a un approccio aperto basato su Delta Sharing, le organizzazioni possono mettere a frutto i propri dati più rapidamente e ottenere informazioni dettagliate più velocemente.

Siamo entusiasti di annunciare che Databricks sta espandendo l'ecosistema Delta Sharing con nuovi partner, tra cui Cloudflare, Dell, Oracle e Twilio, per condividere dati in modo trasparente tra le loro piattaforme, Databricks, Apache Spark™, pandas, PowerBI, Excel e qualsiasi altro sistema che supporti il protocollo aperto.

Databricks Marketplace è ora disponibile a tutti

Su Delta Sharing si basano altre funzionalità di collaborazione, tra cui il Databricks Marketplace. Di recente abbiamo annunciato la Public Preview di Databricks Marketplace e oggi siamo lieti di annunciare la disponibilità generale di Databricks Marketplace.

Molti provider cloud offrono marketplace di dati, ma quando abbiamo chiesto ai provider di dati, ci hanno detto di riscontrare delle limitazioni:

• I marketplace sono riservati a un cloud o a un data warehouse specifico.
• Limitato solo ai dati o magari ad applicazioni semplici.
• La consegna dei dati richiede ETL oppure l'uso di un meccanismo di consegna proprietario.

Databricks Marketplace è un marketplace aperto per soluzioni di dati, accessibile a qualsiasi client in grado di leggere le condivisioni delta. Questo offre grandi vantaggi ai provider per raggiungere più utenti. I consumatori possono scoprire facilmente non solo i set di dati, ma anche valutare i prodotti di dati più velocemente, perché gli asset includono notebook e visualizzazioni, e non devono essere clienti Databricks per usufruire del marketplace. È davvero aperto.

Disponibile da oggi, il Databricks Marketplace consente di condividere e scambiare asset di dati, inclusi set di dati e Notebook, nel marketplace pubblico o in exchange privati. Il Databricks Marketplace è aperto anche agli utenti non Databricks.

Nuovi fornitori di dati sul Databricks Marketplace

Negli ultimi mesi abbiamo continuato ad aumentare il numero di partner in vari settori industriali e abbiamo centinaia di listing sul nostro marketplace che puoi esplorare nel nostro Open Marketplace. Databricks Marketplace dà il benvenuto anche a ulteriori provider di dati di lancio di vari settori industriali:

• Servizi finanziari: S&P Global, Experian, London Stock Exchange Group, Corelogic, YipitData, Morningstar e Bloomberg Government
• Sanità e scienze della vita: IQVIA, Definitive Healthcare, Datavant e Ontada
• Geospaziale: Foursquare, Divirod, Accuweather Veraset, Safegraph e Carto
• Pubblicità e marketing: LiveRamp, Acxiom
• Servizi di informazione aziendale: LexisNexis e ZoomInfo
• Retail: Circana (già IRI)

«Con la crescita dell'adozione dell'AI e delle analitiche avanzate, siamo entusiasti di collaborare con Databricks per aiutare i clienti a ottenere informazioni dettagliate più rapidamente.» Questa collaborazione mira a offrire alle aziende un accesso ai dati unificato e in tempo reale, promuovendo la collaborazione e potenziando le capacità di analitiche avanzate e di processo decisionale quantitativo nel settore finanziario e non solo. — Stuart Brown, Direttore del Gruppo Soluzioni Dati Aziendali presso la London Stock Exchange

In arrivo: funzionalità di condivisione di modelli di AI

Databricks offrirà anche la condivisione di modelli di IA nel Databricks Marketplace, consentendo a data consumer e provider di scoprire e monetizzare modelli di IA e di integrare l'IA in tutte le loro soluzioni di dati. Grazie alla condivisione di modelli di IA, i clienti di Databricks avranno accesso ai migliori modelli della categoria, che potranno essere applicati in modo rapido e sicuro ai loro dati. Databricks stessa curerà e pubblicherà modelli open source per i casi d'uso più comuni, come l'instruction-following e il riepilogo del testo, e ottimizzerà il tuning o il deployment di questi modelli su Databricks. La condivisione di modelli di AI nel Databricks Marketplace è prevista in anteprima nel corso del prossimo anno.

Prossimamente: Lakehouse Apps in Databricks Marketplace

Le applicazioni di dati e IA sono tra le categorie di software in più rapida crescita e la crescita dell'IA generativa e dei modelli linguistici di grandi dimensioni (LLM) ha accelerato questa tendenza. Per i clienti, le Lakehouse Apps saranno il modo più sicuro per eseguire applicazioni che sbloccano l'intero valore dei dati nella loro Lakehouse, sfruttano i servizi nativi di Databricks ed estendono Databricks con nuove funzionalità. Le Lakehouse Apps offriranno agli utenti un accesso facile e sicuro a un'ampia gamma di nuove applicazioni innovative e ridurranno il tempo e l'impegno necessari per adottare, integrare e gestire le applicazioni di dati e IA.

Le app Lakehouse sono un nuovo modo per creare, distribuire e gestire applicazioni per la piattaforma Databricks. Gli sviluppatori trarranno vantaggio da una distribuzione più semplice pubblicando le loro Lakehouse Apps nel Databricks Marketplace, consentendo ai clienti di scoprire e distribuire rapidamente il loro software. Le Lakehouse Apps nel Databricks Marketplace sono attese in anteprima il prossimo anno.

Collaborazione nel rispetto della privacy con Databricks Clean Rooms

Oggi siamo entusiasti di annunciare Databricks Clean Rooms in anteprima privata su AWS. Una data clean room consente la collaborazione sicura e isolata tra organizzazioni, permettendo l'unione e l'elaborazione dei rispettivi set di dati e garantendo al contempo che nessuna parte abbia accesso diretto o visibilità sui dati grezzi delle altre o, in alcuni casi, su pacchetti proprietari o modelli di IA.

Databricks Clean Rooms offre un ambiente sicuro in cui le aziende possono collaborare con clienti e partner su qualsiasi cloud, dando priorità a flessibilità, scalabilità e interoperabilità. A differenza di altre soluzioni, Databricks Clean Rooms supporta più linguaggi (SQL, R, Scala, Java, Python), consentendo sia semplici carichi di lavoro analitici come i join, sia calcoli complessi come il machine learning. Offre scalabilità per la collaborazione con più collaboratori, riducendo la necessità di gestire più fornitori. Basato sul protocollo open Delta Sharing, i partecipanti possono condividere dati in modo sicuro senza replicarli e senza vincoli di piattaforma (lock-in), evolvendo dalla semplice Data Sharing al compute congiunto sicuro.

Introduzione a Data Sharing e collaborazione in Databricks

Databricks consente la condivisione e la collaborazione aperte e non vediamo l'ora di vedere come utilizzerete Delta Sharing, Databricks Marketplace, Lakehouse Apps e Databricks Clean Rooms per collaborare in modo semplice e affidabile.

Non perderti altri entusiasmanti aggiornamenti su Data Sharing e collaborazione e le nostre sessioni al Data and AI Summit. Le sessioni saranno rese disponibili on-demand poco dopo la conclusione della conferenza.

Iscriviti per diventare un data provider (selezionare "Marketplace" come programma di interesse).

Esprimi il tuo interesse a partecipare alla nostra anteprima privata di Databricks Clean Rooms, oppure attendi di iscriverti alla nostra anteprima pubblica che sarà disponibile più avanti quest'anno.