AI/BI Genie è ora disponibile a livello generale

Lo scorso giugno, abbiamo annunciato Databricks AI/BI, il nostro ingresso nella categoria della Business Intelligence, basato sull'AI che comprende a fondo i tuoi dati, la semantica e i modelli di utilizzo, e progettato da zero per sfruttare la Data Intelligence Platform. AI/BI non solo offre una conventional BI experience attraverso Dashboard, ma include anche Genie, un'esperienza di analisi conversazionale che consente a tutti di rispondere alle proprie domande sui dati tramite il linguaggio naturale. Oggi, siamo entusiasti di annunciare che AI/BI Genie si unirà ad AI/BI Dashboard come disponibilità generale su tutti i cloud.

Cos'è Genie?

Nella sua essenza, AI/BI Genie consente agli utenti di porre domande in linguaggio naturale e ottenere informazioni immediate dai dati. Gli utenti aziendali possono porre domande come "Com'è la mia pipeline di vendita?" e Genie risponderà con una combinazione di riepiloghi di testo, dati tabulari e visualizzazioni. Con ogni risposta, Genie fornisce anche una spiegazione di come è giunto alla risposta per dare agli utenti fiducia in tale output.

Il nostro obiettivo con Genie è fornire un'esperienza di analisi conversazionale che funzioni effettivamente come pubblicizzato nel mondo reale: risposte affidabili, accurate e pertinenti nel contesto specifico della tua organizzazione. Questa è una sfida anche per i più recenti e migliori LLM, poiché non comprendono il contesto univoco o la semantica specifica dei dati e del business di ogni organizzazione.

AI/BI Genie risolve questo problema consentendo agli analisti di raggruppare i dati (come tabelle e viste) insieme alla semantica (come definizioni di metriche, query di esempio, istruzioni di testo e asset certificati) in uno spazio Genie incentrato su un argomento specifico, ad esempio, la pipeline di vendita.

Lo spazio Genie funge da knowledge store locale, unendo la semantica estratta dagli asset esistenti sulla Data Intelligence Platform con la cura e il feedback forniti da analisti esperti. In sostanza, questo sistema consente agli analisti dei dati di ampliare il loro impatto creando un agente informato in grado di rispondere alle domande sui dati proprio come farebbero loro. Consente agli utenti aziendali di rispondere autonomamente a domande che non sono coperte da dashboard e report esistenti, liberando gli analisti per concentrarsi su lavori di maggior valore.

Aggiornamenti dall'annuncio

Da quando abbiamo annunciato AI/BI Genie lo scorso giugno, abbiamo lavorato duramente per introdurre più funzionalità, una qualità di risposta affidabile ed esperienze utente perfezionate in base al feedback dei nostri clienti in anteprima. Ecco alcuni punti salienti:

• Massima accuratezza: La qualità della risposta è la massima priorità per il team di prodotto Genie e il nostro obiettivo è stato affrontare i problemi del mondo reale emersi da migliaia di clienti attivi. Ad esempio, abbiamo aggiunto il concetto di value dictionaries, che, come mostrato nell'esempio seguente, consente a Genie di abbinare semanticamente una richiesta per "gruppo di primo livello" al valore letterale "gruppo di supporto di prima linea" in base a ciò che è presente nei dati sottostanti. Genie è ora anche in grado di gestire set di dati molto più grandi (nessuna restrizione sul conteggio delle colonne), istruzioni complesse e ha subito più cicli di aggiornamenti del modello.

• Unity Catalog Metric Views: Genie è integrato nativamente nella Data Intelligence Platform e continuiamo a espandere tale base. Ad esempio, abbiamo aggiunto il supporto per Unity Catalog Metrics, consentendo ai clienti di utilizzare modelli di dati affidabili e gestiti per garantire l'accuratezza per casi d'uso critici. Con AI/BI Genie, Unity Catalog funge da unica fonte di verità sia per i dati che per la semantica, eliminando la necessità di una modellazione ridondante.
• Supporto per la valutazione e i benchmark: gli ingegneri esperti ti diranno che qualsiasi sforzo di AI dovrebbe iniziare con una fase di valutazione. In caso contrario, si verificherà un errore in produzione. Le esperienze di analisi conversazionale non sono diverse: quando crei un nuovo spazio Genie, stai in realtà creando un nuovo sistema di AI per un dominio specifico. Questo è il motivo per cui abbiamo aggiunto funzionalità come Benchmark e Richiesta di revisione. I benchmark di Genie sono domande di test curate con risposte SQL previste che consentono agli autori di valutare e migliorare sistematicamente l'accuratezza delle risposte di Genie nel tempo, mentre "Richiesta di revisione" consente agli utenti finali di contrassegnare risposte specifiche per la verifica o la correzione da parte degli amministratori dello spazio, promuovendo la fiducia e la collaborazione tra gli utenti aziendali e i team di dati.

• Analisi ad hoc con Genie File Upload: un modello di analisi comune che abbiamo scoperto durante il periodo di anteprima è stata la necessità di combinare un foglio di calcolo locale (come un elenco di lead da una campagna) con un set di dati gestito in Unity Catalog (come account e contatti di Salesforce) per completare un'attività ad hoc. Con Genie File Upload, puoi semplicemente trascinare e rilasciare file Excel o CSV in Genie e completare qualsiasi analisi completa tramite il linguaggio naturale.

• Genie ovunque: Dashboard e Genie funzionano meglio insieme, motivo per cui ogni AI/BI Dashboard include uno spazio Genie integrato. I dashboard mostrano quali dati sono disponibili per l'esplorazione, mentre Genie consente agli utenti di andare oltre i limiti di sezioni, filtri e combinazioni predefiniti, il tutto all'interno della stessa esperienza. Inoltre, con le nuove API di conversazione di Genie, gli sviluppatori possono incorporare Genie in modo simile in strumenti di collaborazione come Slack, Microsoft Teams o applicazioni interne personalizzate. Ciò apre nuovi modi per gli utenti aziendali di accedere all'analisi conversazionale nel flusso di lavoro, senza cambiare contesto o accedere a un'interfaccia separata.

Abbiamo anche fornito una serie di altri miglioramenti, dalle visualizzazioni migliorate a un'interfaccia utente riprogettata per guidare gli utenti finali attraverso la loro analisi. Prevediamo di continuare questo alto livello di velocità delle funzionalità post-GA; consulta le note di rilascio di AI/BI e resta sintonizzato per ulteriori blog mentre continuiamo ad aggiungere funzionalità nel tempo.

Successo nel mondo reale con Genie

Siamo stati entusiasti della rapida adozione di Genie; oltre 4000 clienti hanno adottato AI/BI Genie durante la sua anteprima per democratizzare i dati e responsabilizzare i propri utenti non tecnici. Ecco un esempio di ciò che alcuni dei nostri clienti in anteprima hanno condiviso con noi su Genie:

Genie sta cambiando il modo in cui potenziamo i team di HP. Con la sua interfaccia intuitiva in linguaggio naturale, consentiamo agli utenti di accedere istantaneamente ai dati critici, senza richiedere alcuna codifica, rendendo le informazioni basate sui dati più veloci e più efficienti. — Bruce Hillsberg, VP, Data Engineering & Insights, Technology & Innovation, HP Inc

Gli utenti contattavano costantemente gli analisti per chiedere: Ehi, come sono andate le vendite per la regione sud-ovest rispetto all'anno precedente? L'idea di essere in grado di chiedere semplicemente a Genie, piuttosto che cercare l'analista giusto e sperare che ottenga la risposta giusta, è stata molto entusiasmante per l'azienda. — Shahmeer Mirza, Senior Director of Data, AI/ML, and R&D, 7-Eleven

I dirigenti e altri leader LOB nel marketing e nella finanza possono utilizzare Genie per accedere ai dati di cui hanno bisogno semplicemente utilizzando un inglese semplice. Assolutamente incredibile. — Felix Baker, Head of Data Services, SEGA Europe

Abbiamo molti altri clienti che hanno avuto un enorme successo con Genie, tra cui Premier Inc, Magic Orange, The AA e Casas Bahia per citarne alcuni. Siamo entusiasti di consentire a più organizzazioni di unirsi a loro rendendo Genie disponibile a livello generale.

Knowledge store di nuova generazione

Il cuore di Genie è il suo knowledge store, un modello semantico vivente che il sistema di AI di Genie consulta ogni volta che risponde a una domanda. Stiamo ora rilasciando la prossima generazione del nostro knowledge store, che consente agli autori di curare la conoscenza con una granularità molto più fine con molto meno sforzo. Gli autori possono aggiungere conoscenza direttamente agli asset di dati, inclusi sinonimi a livello di colonna e valori campionati, nonché contesto a livello di tabella come join di chiave primaria/esterna o metriche certificate e altro ancora. Il sistema di AI composto di Genie può recuperare i giusti elementi di conoscenza per ogni domanda per fornire risposte accurate alle domande degli utenti.

Anche con questi miglioramenti, la cura della semantica è ancora un compito ingrato. Per rendere questo processo significativamente più semplice, Genie ora esegue il knowledge mining e l'estrazione.

Il knowledge mining (sopra) consente a Genie di setacciare il lignaggio di Unity Catalog e la cronologia delle query, preservando al contempo le garanzie di governance di Unity Catalog, per suggerire nuove istruzioni o evidenziare modelli ricorrenti che meritano la promozione al knowledge store, riducendo drasticamente la cura manuale per i proprietari dello spazio.

Abbiamo anche molti clienti che sfruttano Genie per casi d'uso nuovi di zecca in cui non vi è alcun riferimento precedente per avviare il knowledge store. Per gestire questi casi, abbiamo migliorato l'estrazione della conoscenza di Genie in modo che la cura avvenga come parte dell'uso regolare. Durante ogni sessione di chat, Genie estrae informazioni semantiche, propone brevi frammenti di conoscenza e, una volta approvati dall'utente, li invia allo store.

In combinazione con il monitoraggio dell'attività integrato e i cicli di feedback, l'utilizzo quotidiano stesso diventa una pipeline di apprendimento continuo che mantiene accurato il modello semantico di Genie senza revisioni periodiche.

Genie Deep Research

Sebbene la GA di Genie sia una pietra miliare significativa, non stiamo rallentando il nostro percorso per reimmaginare la BI con un approccio AI-first. Siamo entusiasti di annunciare l'anteprima di Genie Deep Research, una nuova modalità in Genie progettata per affrontare domande più complesse e multi-step. Fino ad ora, Genie è stato ottimizzato per le domande "cosa è successo" (ad esempio, "Qual è la nostra pipeline di vendita?"). Rispondere alle domande "perché" e "come" (ad esempio, "Perché le vendite sono in calo?" o "Come possiamo aumentare la nostra pipeline?") richiedeva agli utenti di formulare le proprie ipotesi e chiedere a Genie di testarle singolarmente. Con Deep Research, Genie sfrutterà gli ultimi progressi nella ricerca LLM per affrontare questi tipi di domande producendo un piano di ricerca e analizzando più ipotesi in parallelo prima di riassumere i risultati.

Come con il resto di Genie, Deep Research si baserà ed estenderà il knowledge store di Genie per fornire risultati accurati e affidabili. Genie fornirà anche esplicitamente citazioni per le conclusioni che ha tratto e fornirà semplici esperienze con un clic per esaminare qualsiasi lavoro svolto lungo il percorso. Deep Research sarà reso disponibile come funzionalità sperimentale per i clienti Genie entro la fine dell'estate.

Portare AI/BI Genie ai tuoi team aziendali

Una delle poche preoccupazioni che abbiamo sentito dai clienti sull'implementazione di Genie in generale è che l'accesso ad AI/BI fino ad oggi ha richiesto la navigazione nell'area di lavoro tecnica di Databricks, un'esperienza che può sembrare intimidatoria per gli utenti aziendali non tecnici. Come parte dei nostri annunci del Data and AI Summit, stiamo anche introducendo Databricks One, una nuova esperienza che offre ai team aziendali un accesso semplice e sicuro a AI/BI Dashboard e spazi Genie, nonché alle Databricks Apps. Proprio come AI/BI, Databricks One è disponibile gratuitamente per tutti i clienti Databricks SQL.

Scopri di più

AI/BI Genie e Dashboard sono ora disponibili per i clienti Databricks SQL senza richiedere licenze aggiuntive. Se vuoi saperne di più, puoi consultare la pagina web di AI/BI Genie e iniziare esplorando i seguenti contenuti:

1. Documentazione: Approfondisci i dettagli con la nostra documentazione.
2. Demo: Guarda i nostri video demo, fai tour del prodotto e ottieni tutorial pratici per vedere questi AI/BI in azione.
3. Formazione: Inizia con la formazione gratuita sui prodotti tramite Databricks Academy
4. eBook: Scarica l'eBook Business Intelligence Meets AI eBook

Se non sei già un cliente Databricks, puoi anche provare Genie e altri prodotti Databricks registrandoti per una prova gratuita.

(Questo post sul blog è stato tradotto utilizzando strumenti basati sull'intelligenza artificiale) Post originale