AI/BI Genie ist jetzt allgemein verfügbar

Im Juni letzten Jahres kündigten wir Databricks AI/BI an, unseren Einstieg in die Business Intelligence-Kategorie, aufgebaut auf KI, die Ihre Daten, Semantik und Nutzungsmuster tiefgehend versteht, und von Grund auf so konzipiert wurde, dass sie die Data Intelligence Platform nutzt.  AI/BI bietet nicht nur ein konventionelles BI-Erlebnis durch Dashboards, sondern auch Genie, eine konversationelle Analyseerfahrung, die es jedem ermöglicht, seine eigenen Datenfragen in natürlicher Sprache zu beantworten.  Heute freuen wir uns, Ihnen mitteilen zu können, dass AI/BI Genie nun neben AI/BI Dashboards auf allen Clouds allgemein verfügbar ist.

Was ist Genie?

Im Kern ermöglicht AI/BI Genie Benutzern, Fragen in natürlicher Sprache zu stellen und sofortige Einblicke aus Daten zu erhalten. Geschäftsbenutzer können Fragen stellen wie „Wie sieht meine Vertriebspipeline aus?“ und Genie antwortet mit einer Kombination aus Textzusammenfassungen, tabellarischen Daten und Visualisierungen.  Mit jeder Antwort liefert Genie auch eine Erklärung, wie es zu der Antwort gekommen ist, um den Benutzern Vertrauen in die Ausgabe zu geben.

Unser Ziel mit Genie ist es, eine konversationelle Analyseerfahrung zu bieten, die in der realen Welt auch tatsächlich hält, was sie verspricht – vertrauenswürdige Antworten, die genau und relevant für den einzigartigen Kontext Ihrer Organisation sind. Dies ist selbst für die neuesten und besten LLMs eine Herausforderung, da sie den einzigartigen Kontext oder die Semantik, die für die Daten und das Geschäft jeder Organisation spezifisch sind, nicht verstehen.

AI/BI Genie löst dieses Problem, indem es Analysten ermöglicht, Daten (wie Tabellen und Ansichten) zusammen mit Semantik (wie Metrikdefinitionen, Beispielabfragen, Textanweisungen und zertifizierten Assets) in einem Genie-Bereich zu bündeln, der sich auf ein bestimmtes Thema konzentriert – zum Beispiel die Vertriebspipeline.

Der Genie-Bereich fungiert als lokaler Wissensspeicher, der die aus vorhandenen Assets auf der Data Intelligence Platform extrahierte Semantik mit der Kuratierung und dem Feedback von Fachexperten kombiniert.  Im Wesentlichen ermöglicht dieses System Datenanalysten, ihre Wirkung zu skalieren, indem sie einen wissensbasierten Agenten erstellen, der Datenfragen genauso beantworten kann wie sie selbst. Es befähigt Geschäftsbenutzer, Fragen selbstständig zu beantworten, die nicht durch vorhandene Dashboards und Berichte abgedeckt sind, und gibt Analysten mehr Zeit für wertvollere Aufgaben.

Updates seit der Ankündigung

Seit der Ankündigung von AI/BI Genie im letzten Juni haben wir hart daran gearbeitet, basierend auf dem Feedback unserer Vorschaukunden weitere Funktionen, vertrauenswürdige Antwortqualität und verfeinerte Benutzererlebnisse einzuführen.  Hier sind einige Highlights:

• Branchenführende Genauigkeit:   Die Antwortqualität hat für das Genie-Produktteam oberste Priorität, und wir haben uns darauf konzentriert, reale Probleme anzugehen, die von Tausenden von aktiven Kunden aufgedeckt wurden. Zum Beispiel haben wir das Konzept der Wert-Wörterbücher hinzugefügt, die – wie im folgenden Beispiel gezeigt – es Genie ermöglichen, eine Anfrage nach „erste Gruppenebene“ semantisch mit dem exakten Wert „1st line support group“ abzugleichen, basierend auf den Daten. Genie kann jetzt auch viel größere Datensätze (keine Einschränkungen bei der Spaltenanzahl), komplexe Anweisungen verarbeiten und hat mehrere Zyklen von Modellaktualisierungen durchlaufen. 

• Unity Catalog Metric Views: Genie ist nativ auf der Data Intelligence Platform aufgebaut, und wir erweitern diese Grundlage kontinuierlich. Zum Beispiel haben wir die Unterstützung für Unity Catalog Metriken hinzugefügt, die es Kunden ermöglicht, gesteuerte, vertrauenswürdige Datenmodelle zu verwenden, um die Genauigkeit für kritische Anwendungsfälle zu gewährleisten. Mit AI/BI Genie dient Unity Catalog als einzige Quelle der Wahrheit für Daten und Semantik – wodurch redundante Modellierung überflüssig wird.
• Unterstützung für Evaluierung und Benchmarks: Erfahrene Ingenieure werden Ihnen sagen, dass jeder KI-Aufwand mit einer Evaluierungsphase beginnen sollte.  Andernfalls scheitert man in der Produktion. Konversationelle Analyseerlebnisse sind da keine Ausnahme – wenn Sie einen neuen Genie-Bereich erstellen, erstellen Sie im Grunde ein neues KI-System für einen bestimmten Bereich. Deshalb haben wir Funktionen wie Benchmarks und Ask for Review hinzugefügt. Genie Benchmarks sind kuratierte Testfragen mit erwarteten SQL-Antworten, die es Autoren ermöglichen, die Genauigkeit der Genie-Antworten systematisch zu bewerten und zu verbessern, während „Ask for Review“ Endbenutzern ermöglicht, bestimmte Antworten zur Überprüfung oder Korrektur durch Space-Administratoren zu markieren, was Vertrauen und Zusammenarbeit zwischen Geschäftsbenutzern und Datenteams fördert.

• Ad-hoc-Analyse mit Genie File Upload: Ein häufiges Analyse­muster, das wir während der Vorschau­phase entdeckt haben, war die Notwendigkeit, eine lokale Tabellen­kalkulation (wie eine Liste von Leads aus einer Kampagne) mit einem verwalteten Datensatz in Unity Catalog (wie Salesforce-Konten und -Kontakte) zu kombinieren, um eine Ad-hoc-Aufgabe zu erledigen.  Mit Genie File Upload können Sie einfach Excel- oder CSV-Dateien in Genie ziehen und ablegen und jede umfassende Analyse über natürliche Sprache durchführen.

• Genie überall: Dashboards und Genie funktionieren besser zusammen – deshalb enthält jedes AI/BI Dashboard einen integrierten Genie-Bereich. Dashboards zeigen, welche Daten für die Erkundung verfügbar sind, während Genie es Benutzern ermöglicht, über die Grenzen vordefinierter Slices, Filter und Kombinationen hinauszugehen – alles innerhalb desselben Erlebnisses. Darüber hinaus können Entwickler mit den neuen Genie Conversation APIs Genie ähnlich in Kollaborationstools wie Slack, Microsoft Teams oder benutzerdefinierten internen Anwendungen einbetten. Dies eröffnet neue Möglichkeiten für Geschäftsbenutzer, konversationelle Analysen im Arbeitsablauf zu nutzen – ohne den Kontext zu wechseln oder sich bei einer separaten Benutzeroberfläche anzumelden.

Wir haben auch eine Reihe weiterer Verbesserungen vorgenommen – von verbesserten Visualisierungen bis hin zu einer neu gestalteten Benutzeroberfläche, die Endbenutzer durch ihre Analysen führt.  Wir planen, dieses hohe Tempo bei der Feature-Entwicklung auch nach der allgemeinen Verfügbarkeit beizubehalten; besuchen Sie die AI/BI Release Notes und bleiben Sie dran für weitere Blogs, während wir im Laufe der Zeit weitere Funktionen hinzufügen.

Erfolgreiche Anwendung von Genie in der Praxis

Wir sind begeistert von der schnellen Akzeptanz von Genie; über 4000 Kunden haben AI/BI Genie während der Vorschauphase genutzt, um Daten zu demokratisieren und ihre nicht-technischen Benutzer zu befähigen.  Hier ist eine Auswahl dessen, was einige unserer Vorschaukunden uns über Genie erzählt haben:

Genie verändert die Art und Weise, wie wir Teams bei HP befähigen. Mit seiner intuitiven Benutzeroberfläche für natürliche Sprache ermöglichen wir Benutzern den sofortigen Zugriff auf kritische Daten, ganz ohne Code, wodurch datengesteuerte Erkenntnisse schneller und effizienter gewonnen werden. — Bruce Hillsberg, VP, Data Engineering & Insights, Technology & Innovation, HP Inc

Benutzer fragten ständig Analysten: „Hey, wie sahen die Verkäufe in der südwestlichen Region im Vergleich zum Vorjahr aus?“ Die Vorstellung, Genie einfach fragen zu können, anstatt nach dem richtigen Analysten zu suchen und zu hoffen, dass er die Antwort richtig liefert, war für das Geschäft sehr spannend. — Shahmeer Mirza, Senior Director of Data, AI/ML, and R&D, 7-Eleven

Führungskräfte und andere LOB-Leiter in Marketing und Finanzen können Genie nutzen, um mit einfachem Englisch auf die benötigten Daten zuzugreifen. Absolut unglaublich. — Felix Baker, Head of Data Services, SEGA Europe

Wir haben viele andere Kunden, die mit Genie enorme Erfolge erzielt haben, darunter Premier Inc, Magic Orange, The AA und Casas Bahia, um nur einige zu nennen.  Wir freuen uns darauf, mehr Organisationen zu ermöglichen, sich ihnen anzuschließen, indem wir Genie allgemein verfügbar machen. 

Wissensspeicher der nächsten Generation

Das Herzstück von Genie ist sein Wissensspeicher – ein lebendiges semantisches Modell, das das KI-System von Genie jedes Mal konsultiert, wenn es eine Frage beantwortet. Wir veröffentlichen nun die nächste Generation unseres Wissensspeichers, die es Autoren ermöglicht, Wissen mit viel feinerer Granularität und mit viel weniger Aufwand zu kuratieren. Autoren können Wissen direkt zu Datenassets hinzufügen, einschließlich Spalten-Synonymen und Stichprobenwerten, sowie Kontext auf Tabellenebene wie Primär-/Fremdschlüssel-Joins oder zertifizierte Metriken und mehr. Das kombinierte KI-System von Genie kann die richtigen Wissensfragmente für jede Frage abrufen, um den Benutzern genaue Antworten zu liefern. 

Selbst mit diesen Verbesserungen ist die Kuratierung von Semantik immer noch eine mühsame Aufgabe. Um diesen Prozess erheblich zu vereinfachen, führt Genie jetzt Knowledge Mining und Extraktion durch. 

Knowledge Mining (oben) ermöglicht es Genie, die Lineage von Unity Catalog und den Abfrageverlauf zu durchsuchen, während die Governance-Garantien von Unity Catalog erhalten bleiben, um neue Anweisungen vorzuschlagen oder wiederkehrende Muster hervorzuheben, die eine Beförderung in den Wissensspeicher verdienen, was die manuelle Kuratierung für Space-Besitzer drastisch reduziert. 

Wir haben auch viele Kunden, die Genie für brandneue Anwendungsfälle nutzen, bei denen keine vorherige Referenz zum Bootstrapping des Wissensspeichers vorhanden ist. Um diese Fälle zu bewältigen, haben wir die Wissensextraktion von Genie verbessert, sodass die Kuratierung als Teil der regulären Nutzung erfolgt. Während jeder Chat-Sitzung extrahiert Genie semantische Informationen, schlägt prägnante Wissens-Snippets vor und – sobald der Benutzer zustimmt – speichert sie im Speicher. 

In Verbindung mit der integrierten Aktivitätsüberwachung und den Feedbackschleifen wird die tägliche Nutzung selbst zu einer kontinuierlichen Lernpipeline, die das semantische Modell von Genie ohne periodische Überholungen korrekt hält.

Genie Deep Research

Während die allgemeine Verfügbarkeit von Genie ein wichtiger Meilenstein ist, verlangsamen wir unsere Reise zur Neuerfindung von BI mit einem KI-ersten Ansatz nicht. Wir freuen uns, die Vorschau von Genie Deep Research anzukündigen – ein neuer Modus in Genie, der entwickelt wurde, um komplexere, mehrstufige Fragen zu beantworten. Bisher war Genie für „Was ist passiert“-Fragen optimiert (z. B. „Wie hoch ist unsere Vertriebspipeline?“). Um „Warum“- und „Wie“-Fragen zu beantworten (z. B. „Warum sind die Umsätze gesunken?“ oder „Wie können wir unsere Pipeline erhöhen?“), mussten Benutzer ihre eigenen Hypothesen aufstellen und Genie bitten, jede einzeln zu testen. Mit Deep Research wird Genie die neuesten Fortschritte in der LLM-Forschung nutzen, um diese Arten von Fragen zu beantworten, indem es einen Forschungsplan erstellt und mehrere Hypothesen parallel analysiert, bevor die Ergebnisse zusammengefasst werden.

Wie der Rest von Genie wird auch Deep Research auf dem Wissensspeicher von Genie aufbauen und diesen erweitern, um genaue und vertrauenswürdige Ergebnisse zu liefern. Genie wird auch explizit Zitate für die Schlussfolgerungen liefern, die es gezogen hat, und einfache Ein-Klick-Erlebnisse für die Überprüfung aller durchgeführten Arbeiten bieten. Deep Research wird diesen Sommer als experimentelle Funktion für Genie-Kunden verfügbar sein. 

Genie AI/BI für Ihre Geschäftsteams

Eine der wenigen Bedenken, die wir von Kunden bezüglich der breiten Einführung von Genie gehört haben, ist, dass der Zugriff auf AI/BI bisher die Navigation im technischen Databricks-Arbeitsbereich erforderte – eine Erfahrung, die für nicht-technische Geschäftsbenutzer einschüchternd wirken kann. Als Teil unserer Ankündigungen zum Data and AI Summit führen wir auch Databricks One ein – eine neue Erfahrung, die Geschäftsteams einfachen und sicheren Zugriff auf AI/BI-Dashboards und Genie-Bereiche sowie Databricks Apps bietet. Genau wie AI/BI ist Databricks One für alle Databricks SQL-Kunden kostenlos verfügbar.  

Mehr erfahren

AI/BI Genie und Dashboards sind jetzt für Databricks SQL-Kunden ohne zusätzliche Lizenzgebühren verfügbar.  Wenn Sie mehr erfahren möchten, können Sie die Webseite AI/BI Genie besuchen und mit der Erkundung der folgenden Inhalte beginnen:

1. Dokumentation: Tauchen Sie mit unserer Dokumentation tiefer in die Details ein.
2. Demos: Sehen Sie sich unsere Demo-Videos an, machen Sie Produkt-Touren und erhalten Sie praktische Tutorials, um diese AI/BI in Aktion zu sehen.
3. Schulung: Beginnen Sie mit kostenlosen Produkt-Schulungen über die Databricks Academy
4. eBook: Laden Sie das eBook Business Intelligence Meets AI heruntereBook

Wenn Sie noch kein Databricks-Kunde sind, können Sie Genie und andere Databricks-Produkte auch testen, indem Sie sich für eine kostenlose Testversion anmelden.

(Dieser Blogbeitrag wurde mit KI-gestützten Tools übersetzt.) Originalbeitrag