AI/BI Genie è ora disponibile in generale

Lo scorso giugno, abbiamo annunciato Databricks AI/BI, il nostro ingresso nella categoria Business Intelligence, costruito attorno all'IA che comprende a fondo i tuoi dati, la semantica e i modelli di utilizzo, e architettato da zero per sfruttare la Data Intelligence Platform.  AI/BI non offre solo un'esperienza BI convenzionale tramite Dashboards, ma include anche Genie, un'esperienza di analisi conversazionale che consente a chiunque di rispondere alle proprie domande sui dati tramite linguaggio naturale.  Oggi, siamo entusiasti di condividere che AI/BI Genie si unirà ora ad AI/BI Dashboards come Generalmente Disponibile su tutti i cloud.

Cos'è Genie?

Fondamentalmente, AI/BI Genie consente agli utenti di porre domande in linguaggio naturale e ottenere insight istantanei dai dati. Gli utenti aziendali possono porre domande come “Com'è la mia pipeline di vendita?” e Genie risponderà con una combinazione di riepiloghi testuali, dati tabellari e visualizzazioni.  Con ogni risposta, Genie fornisce anche una spiegazione di come è arrivato alla risposta per dare agli utenti fiducia in quell'output.

Il nostro obiettivo con Genie è fornire un'esperienza di analisi conversazionale che funzioni davvero come pubblicizzato nel mondo reale: risposte affidabili, accurate e pertinenti nel contesto unico dell'organizzazione. Questa è una sfida anche per i modelli LLM più recenti e avanzati, poiché non comprendono il contesto o la semantica unici specifici dei dati e del business di ciascuna organizzazione.

AI/BI Genie risolve questo problema consentendo agli analisti di pacchettizzare dati (come tabelle e viste) insieme alla semantica (come definizioni di metriche, query di esempio, istruzioni testuali e asset certificati) in uno spazio Genie focalizzato su un argomento specifico, ad esempio la pipeline di vendita.

Lo spazio Genie funge da knowledge store locale, unendo la semantica estratta dagli asset esistenti sulla Data Intelligence Platform con la curatela e il feedback forniti da analisti esperti.  In sostanza, questo sistema consente agli analisti di dati di scalare il proprio impatto creando un agente competente in grado di rispondere alle domande sui dati proprio come farebbero loro. Dà potere agli utenti aziendali per rispondere autonomamente alle domande non coperte da dashboard e report esistenti, liberando gli analisti per concentrarsi su attività di maggior valore.

Aggiornamenti dall'annuncio

Da quando abbiamo annunciato AI/BI Genie lo scorso giugno, abbiamo lavorato sodo per introdurre più funzionalità, una qualità delle risposte affidabile e esperienze utente raffinate basate sul feedback dei nostri clienti in anteprima.  Ecco alcuni punti salienti:

• Accuratezza best-in-class:  La qualità delle risposte è la priorità assoluta per il team di prodotto Genie e il nostro focus è stato affrontare i problemi del mondo reale emersi da migliaia di clienti attivi.  Ad esempio, abbiamo aggiunto il concetto di value dictionaries, che, come mostrato nell'esempio seguente, consentono a Genie di associare semanticamente una richiesta di “primo livello di gruppo” al valore letterale “gruppo di supporto di prima linea” in base a ciò che si trova nei dati sottostanti. Genie è ora in grado di gestire set di dati molto più grandi (nessuna restrizione sul numero di colonne), istruzioni complesse ed è passato attraverso molteplici cicli di aggiornamenti del modello. 

• Unity Catalog Metric Views: Genie è costruito nativamente sulla Data Intelligence Platform e continuiamo ad espandere quella base. Ad esempio, abbiamo aggiunto il supporto per Unity Catalog Metrics, consentendo ai clienti di utilizzare modelli di dati governati e affidabili per garantire l'accuratezza per casi d'uso critici. Con AI/BI Genie, Unity Catalog funge da unica fonte di verità sia per i dati che per la semantica, eliminando la necessità di modellazione ridondante.
• Supporto per valutazione e benchmark: Gli ingegneri esperti ti diranno che qualsiasi sforzo di IA dovrebbe iniziare con una fase di valutazione.  La mancata osservanza significa fallimento in produzione. Le esperienze di analisi conversazionale non sono diverse: quando crei un nuovo spazio Genie, stai in realtà creando un nuovo sistema di IA per un dominio specifico. Questo è il motivo per cui abbiamo aggiunto funzionalità come Benchmarks e Ask for Review. I Genie Benchmarks sono domande di test curate con risposte SQL attese che consentono agli autori di valutare e migliorare sistematicamente l'accuratezza delle risposte di Genie nel tempo, mentre 'Ask for Review' consente agli utenti finali di segnalare risposte specifiche per la verifica o la correzione da parte degli amministratori dello spazio, favorendo fiducia e collaborazione tra utenti aziendali e team di dati.

• Analisi ad hoc con Genie File Upload: Un modello di analisi comune che abbiamo scoperto durante il periodo di anteprima è stata la necessità di combinare un foglio di calcolo locale (come un elenco di lead da una campagna) con un set di dati gestito in Unity Catalog (come account e contatti Salesforce) per completare un'attività ad hoc.  Con Genie File Upload, puoi semplicemente trascinare e rilasciare file Excel o CSV in Genie e completare qualsiasi analisi completa tramite linguaggio naturale.

• Genie ovunque: Dashboards e Genie funzionano meglio insieme, motivo per cui ogni AI/BI Dashboard include uno spazio Genie integrato. Le dashboard mostrano quali dati sono disponibili per l'esplorazione, mentre Genie consente agli utenti di andare oltre i limiti di slice, filtri e combinazioni predefiniti, tutto all'interno della stessa esperienza. Inoltre, con le nuove Genie Conversation APIs, gli sviluppatori possono incorporare Genie in strumenti di collaborazione come Slack, Microsoft Teams o applicazioni interne personalizzate. Ciò apre nuovi modi per gli utenti aziendali di accedere all'analisi conversazionale nel flusso di lavoro, senza cambiare contesto o accedere a un'interfaccia separata.

Abbiamo anche apportato una serie di altri miglioramenti, dalle visualizzazioni migliorate a un'interfaccia utente ridisegnata per guidare gli utenti finali attraverso la loro analisi.  Abbiamo in programma di continuare questa elevata velocità di rilascio di funzionalità post-GA; consulta le note di rilascio AI/BI e rimani sintonizzato per altri blog man mano che continuiamo ad aggiungere funzionalità nel tempo.

Successo nel mondo reale con Genie

Siamo stati entusiasti della rapida adozione di Genie; oltre 4000 clienti hanno adottato AI/BI Genie durante la sua anteprima per democratizzare i dati e potenziare i propri utenti non tecnici.  Ecco un esempio di ciò che alcuni dei nostri clienti in anteprima hanno condiviso con noi su Genie:

Genie sta cambiando il modo in cui potenziamo i team in HP. Con la sua intuitiva interfaccia in linguaggio naturale, consentiamo agli utenti di accedere istantaneamente ai dati critici, senza richiedere codice, rendendo gli insight basati sui dati più veloci ed efficienti. — Bruce Hillsberg, VP, Data Engineering & Insights, Technology & Innovation, HP Inc

Gli utenti contattavano costantemente gli analisti per chiedere: Ehi, com'era vendite nella regione sud-ovest rispetto all'anno precedente? L'idea di poter semplicemente chiedere a Genie, piuttosto che cercare l'analista giusto e sperare che ottenga la risposta corretta, è stata molto entusiasmante per il business. — Shahmeer Mirza, Senior Director of Data, AI/ML, and R&D, 7-Eleven

I dirigenti e altri leader di linea di business nel marketing e nella finanza possono utilizzare Genie per accedere ai dati di cui hanno bisogno semplicemente usando l'inglese corrente. Assolutamente incredibile. — Felix Baker, Head of Data Services, SEGA Europe

Abbiamo molti altri clienti che hanno ottenuto un successo eccezionale con Genie, tra cui Premier Inc, Magic Orange, The AA e Casas Bahia, per citarne alcuni.  Siamo entusiasti di consentire a più organizzazioni di unirsi a loro rendendo Genie generalmente disponibile. 

Knowledge store di nuova generazione

Il cuore di Genie è il suo knowledge store, un modello semantico attivo che il sistema AI di Genie consulta ogni volta che risponde a una domanda. Stiamo ora rilasciando la prossima generazione del nostro knowledge store, che consente agli autori di curare la conoscenza a una granularità molto più fine con molto meno sforzo. Gli autori possono aggiungere conoscenza direttamente agli asset di dati, inclusi sinonimi a livello di colonna e valori campionati, nonché contesto a livello di tabella come join di chiavi primarie/esterne o metriche certificate e altro ancora. Il sistema AI composto di Genie può recuperare i pezzi di conoscenza giusti per ogni domanda per fornire risposte accurate alle domande degli utenti. 

Anche con questi miglioramenti, la curatela della semantica è ancora un lavoro noioso. Per rendere questo processo significativamente più semplice, Genie ora esegue knowledge mining ed estrazione. 

Il knowledge mining (sopra) consente a Genie di analizzare la lineage di Unity Catalog e la cronologia delle query, preservando le garanzie di governance di Unity Catalog, per suggerire nuove istruzioni o evidenziare pattern ricorrenti che meritano la promozione al knowledge store, riducendo drasticamente la curatela manuale per i proprietari dello spazio. 

Abbiamo anche molti clienti che utilizzano Genie per casi d'uso completamente nuovi in cui non esiste un riferimento precedente per avviare il knowledge store. Per gestire questi casi, abbiamo migliorato l'estrazione della conoscenza di Genie in modo che la curatela avvenga come parte dell'uso regolare. Durante ogni sessione di chat, Genie estrae informazioni semantiche, propone brevi snippet di conoscenza e, una volta approvati dall'utente, li committa nello store. 

Abbinato al monitoraggio delle attività integrato e ai loop di feedback, l'uso quotidiano stesso diventa una pipeline di apprendimento continuo che mantiene accurato il modello semantico di Genie senza revisioni periodiche.

Genie Deep Research

Sebbene il GA di Genie sia una pietra miliare significativa, non stiamo rallentando il nostro percorso per reinventare il BI con un approccio AI-first. Siamo entusiasti di annunciare l'anteprima di Genie Deep Research, una nuova modalità in Genie progettata per affrontare domande più complesse e multi-step. Finora, Genie è stato ottimizzato per domande del tipo "cosa è successo" (ad esempio, "Qual è la nostra pipeline di vendita?"). Rispondere a domande del tipo "perché" e "come" (ad esempio, "Perché le vendite sono in calo?" o "Come possiamo aumentare la nostra pipeline?") richiedeva agli utenti di formulare le proprie ipotesi e chiedere a Genie di testarle individualmente. Con Deep Research, Genie sfrutterà i più recenti progressi nella ricerca LLM per affrontare questi tipi di domande producendo un piano di ricerca e analizzando più ipotesi in parallelo prima di riassumere i risultati.

Come per il resto di Genie, Deep Research si baserà ed estenderà il knowledge store di Genie per fornire risultati accurati e affidabili. Genie fornirà anche esplicitamente citazioni per le conclusioni tratte e offrirà esperienze semplici con un clic per esaminare qualsiasi lavoro svolto lungo il percorso. Deep Research sarà reso disponibile come funzionalità sperimentale ai clienti di Genie entro la fine dell'estate. 

Portare AI/BI Genie ai team aziendali 

Una delle poche preoccupazioni che abbiamo sentito dai clienti riguardo al rilascio diffuso di Genie è che l'accesso ad AI/BI ha finora richiesto la navigazione nel workspace tecnico di Databricks, un'esperienza che può risultare intimidatoria per gli utenti aziendali non tecnici. Come parte degli annunci del nostro Data and AI Summit, stiamo anche introducendo Databricks One, una nuova esperienza che offre ai team aziendali un accesso semplice e sicuro a dashboard AI/BI e spazi Genie, nonché alle Databricks Apps. Proprio come AI/BI, Databricks One è disponibile gratuitamente per tutti i clienti Databricks SQL.  

Ulteriori informazioni

AI/BI Genie e Dashboards sono ora disponibili per i clienti Databricks SQL senza licenze aggiuntive richieste.  Se desideri saperne di più, puoi consultare la pagina web AI/BI Genie e iniziare esplorando i seguenti contenuti:

1. Documentazione: Approfondisci i dettagli con la nostra documentazione.
2. Demo: Guarda i nostri video di demo, fai tour del prodotto e ottieni tutorial pratici per vedere questi AI/BI in azione.
3. Formazione: Inizia con la formazione gratuita sul prodotto tramite Databricks Academy
4. eBook: Scarica l'eBook Business Intelligence Meets AI eBook

Se non sei già un cliente Databricks, puoi anche provare Genie e altri prodotti Databricks iscrivendoti a una prova gratuita.

(Questo post sul blog è stato tradotto utilizzando strumenti basati sull'intelligenza artificiale) Post originale