AI/BI Genie est maintenant disponible en général

En juin dernier, nous avons annoncé Databricks AI/BI, notre entrée dans la catégorie Business Intelligence, conçue autour de l'IA qui comprend en profondeur vos données, votre sémantique et vos modèles d'utilisation, et architecturée dès le départ pour tirer parti de la Data Intelligence Platform.  AI/BI offre non seulement une expérience BI conventionnelle via les Tableaux de bord, mais propose également Genie, une expérience d'analyse conversationnelle qui permet à chacun de répondre à ses propres questions sur les données en langage naturel.  Aujourd'hui, nous sommes ravis de vous annoncer que AI/BI Genie rejoint maintenant AI/BI Dashboards en tant que Disponibilité Générale sur tous les clouds.

Qu'est-ce que Genie ?

Fondamentalement, AI/BI Genie permet aux utilisateurs de poser des questions en langage naturel et d'obtenir des insights instantanés à partir des données. Les utilisateurs professionnels peuvent poser des questions telles que « Quelle est ma pipeline de ventes ? » et Genie répondra par une combinaison de résumés textuels, de données tabulaires et de visualisations.  Avec chaque réponse, Genie fournit également une explication de la manière dont il est parvenu à la réponse pour donner aux utilisateurs confiance dans ce résultat.

Notre objectif avec Genie est de fournir une expérience d'analyse conversationnelle qui fonctionne réellement comme annoncé dans le monde réel — des réponses fiables, précises et pertinentes dans le contexte unique de votre organisation. C'est un défi même pour les LLM les plus récents et les plus performants, car ils ne comprennent pas le contexte unique ou la sémantique spécifique aux données et aux activités de chaque organisation.

AI/BI Genie résout ce problème en permettant aux analystes d'empaqueter des données (telles que des tables et des vues) avec la sémantique (comme les définitions de métriques, les requêtes exemples, les instructions textuelles et les actifs certifiés) dans un espace Genie axé sur un sujet spécifique — par exemple, la pipeline de ventes.

L'espace Genie agit comme un magasin de connaissances local, mariant la sémantique extraite des actifs existants sur la Data Intelligence Platform avec la curation et le feedback fournis par des analystes experts.  Essentiellement, ce système permet aux analystes de données d'étendre leur impact en créant un agent compétent capable de répondre aux questions sur les données comme ils le feraient eux-mêmes. Il permet aux utilisateurs professionnels de répondre eux-mêmes aux questions qui ne sont pas couvertes par les tableaux de bord et les rapports existants, libérant ainsi les analystes pour se concentrer sur des tâches à plus forte valeur ajoutée.

Mises à jour depuis l'annonce

Depuis que nous avons annoncé AI/BI Genie en juin dernier, nous avons travaillé dur pour introduire davantage de fonctionnalités, une qualité de réponse fiable et des expériences utilisateur affinées basées sur les retours de nos clients en avant-première.  Voici quelques points forts :

• Précision de pointe :   La qualité des réponses est la priorité absolue pour l'équipe produit Genie, et nous nous sommes concentrés sur la résolution des problèmes du monde réel mis en évidence par des milliers de clients actifs. Par exemple, nous avons ajouté le concept de dictionnaires de valeurs, qui — comme le montre l'exemple ci-dessous — permet à Genie de faire correspondre sémantiquement une demande de « premier groupe de niveau » à la valeur littérale « groupe de support de 1ère ligne » en fonction de ce qui se trouve dans les données sous-jacentes. Genie est également désormais capable de gérer des ensembles de données beaucoup plus volumineux (aucune restriction sur le nombre de colonnes), des instructions complexes, et a subi plusieurs cycles de mises à jour de modèles. 

• Vues Métriques Unity Catalog : Genie est construit nativement sur la Data Intelligence Platform, et nous continuons à développer cette base. Par exemple, nous avons ajouté la prise en charge des Métriques Unity Catalog, permettant aux clients d'utiliser des modèles de données gouvernés et fiables pour garantir l'exactitude des cas d'utilisation critiques. Avec AI/BI Genie, Unity Catalog sert de source unique de vérité pour les données et la sémantique — éliminant le besoin de modélisation redondante.
• Support pour l'évaluation et les benchmarks : Les ingénieurs qualifiés vous diront que tout effort d'IA devrait commencer par une phase d'évaluation.  Ne pas le faire, c'est échouer en production. Les expériences d'analyse conversationnelle ne font pas exception — lorsque vous créez un nouvel espace Genie, vous créez en réalité un nouveau système d'IA pour un domaine spécifique. C'est pourquoi nous avons ajouté des fonctionnalités telles que les Benchmarks et Demande de révision. Les Benchmarks Genie sont des questions de test organisées avec des réponses SQL attendues qui permettent aux auteurs d'évaluer et d'améliorer systématiquement la précision des réponses de Genie au fil du temps, tandis que « Demande de révision » permet aux utilisateurs finaux de signaler des réponses spécifiques pour vérification ou correction par les administrateurs de l'espace, favorisant ainsi la confiance et la collaboration entre les utilisateurs professionnels et les équipes de données.

• Analyse ad-hoc avec le téléchargement de fichiers Genie : Un modèle d'analyse courant que nous avons découvert pendant la période de prévisualisation était la nécessité de mélanger une feuille de calcul locale (comme une liste de prospects d'une campagne) avec un jeu de données géré dans Unity Catalog (comme les comptes et contacts Salesforce) pour accomplir une tâche ad-hoc.  Avec Genie File Upload, vous pouvez simplement glisser-déposer des fichiers Excel ou CSV dans Genie et effectuer toute analyse complète en langage naturel.

• Genie partout : Les tableaux de bord et Genie fonctionnent mieux ensemble — c'est pourquoi chaque tableau de bord AI/BI comprend un espace Genie intégré. Les tableaux de bord montrent quelles données sont disponibles pour l'exploration, tandis que Genie permet aux utilisateurs d'aller au-delà des limites des tranches, filtres et combinaisons prédéfinis — le tout dans la même expérience. De plus, avec les nouvelles APIs de conversation Genie, les développeurs peuvent intégrer Genie de manière similaire dans des outils de collaboration comme Slack, Microsoft Teams, ou des applications internes personnalisées. Cela ouvre de nouvelles façons pour les utilisateurs professionnels d'accéder à l'analyse conversationnelle dans le flux de travail — sans changer de contexte ni se connecter à une interface séparée.

Nous avons également apporté une gamme d'autres améliorations — des visualisations améliorées à une interface utilisateur repensée pour guider les utilisateurs finaux dans leur analyse.  Nous prévoyons de maintenir cette vitesse de développement élevée après la GA ; veuillez consulter les notes de version AI/BI et restez à l'écoute pour d'autres blogs à mesure que nous continuerons d'ajouter des fonctionnalités au fil du temps.

Succès réels avec Genie

Nous avons été ravis de l'adoption rapide de Genie ; plus de 4000 clients ont adopté AI/BI Genie pendant sa prévisualisation pour démocratiser les données et autonomiser leurs utilisateurs non techniques.  Voici un échantillon de ce que certains de nos clients en avant-première ont partagé avec nous à propos de Genie :

Genie change la façon dont nous responsabilisons les équipes chez HP. Grâce à son interface intuitive en langage naturel, nous permettons aux utilisateurs d'accéder instantanément à des données critiques, sans codage, rendant les insights basés sur les données plus rapides et plus efficaces. — Bruce Hillsberg, VP, Data Engineering & Insights, Technology & Innovation, HP Inc

Les utilisateurs sollicitaient constamment les analystes pour demander : « Hé, à quoi ressemblaient les ventes pour la région du sud-ouest par rapport à l'année précédente ? » L'idée de pouvoir simplement demander à Genie, plutôt que de chercher le bon analyste et d'espérer qu'il obtienne la bonne réponse, a été très excitante pour l'entreprise. — Shahmeer Mirza, Senior Director of Data, AI/ML, and R&D, 7-Eleven

Les cadres et autres dirigeants de lignes de métier en marketing et finance peuvent utiliser Genie pour accéder aux données dont ils ont besoin en utilisant simplement l'anglais courant. Absolument incroyable. — Felix Baker, Head of Data Services, SEGA Europe

Nous avons de nombreux autres clients qui ont connu un succès incroyable avec Genie, notamment Premier Inc, Magic Orange, The AA, et Casas Bahia, pour n'en nommer que quelques-uns.  Nous sommes ravis de permettre à davantage d'organisations de les rejoindre en rendant Genie généralement disponible. 

Magasin de connaissances de nouvelle génération

Le cœur de Genie est son magasin de connaissances — un modèle sémantique vivant que le système d'IA de Genie consulte chaque fois qu'il répond à une question. Nous lançons maintenant la prochaine génération de notre magasin de connaissances, qui permet aux auteurs de gérer les connaissances à une granularité beaucoup plus fine avec beaucoup moins d'effort. Les auteurs peuvent ajouter des connaissances directement aux actifs de données, y compris les synonymes au niveau des colonnes et les valeurs échantillonnées, ainsi que le contexte au niveau des tables tel que les jointures de clés primaires/étrangères ou les métriques certifiées, et plus encore. Le système d'IA composite de Genie peut récupérer les bons éléments de connaissance pour chaque question afin de fournir des réponses précises aux questions des utilisateurs. 

Même avec ces améliorations, la gestion des sémantiques reste une corvée. Pour rendre ce processus beaucoup plus facile, Genie effectue désormais l'exploration et l'extraction de connaissances. 

L'exploration de connaissances (ci-dessus) permet à Genie de parcourir la lignée d'Unity Catalog et l'historique des requêtes, tout en préservant les garanties de gouvernance d'Unity Catalog, pour suggérer de nouvelles instructions ou mettre en évidence des modèles récurrents qui méritent d'être promus dans le magasin de connaissances, réduisant considérablement la gestion manuelle pour les propriétaires d'espaces. 

Nous avons également de nombreux clients qui utilisent Genie pour des cas d'utilisation entièrement nouveaux où il n'y a aucune référence antérieure pour amorcer le magasin de connaissances. Pour gérer ces cas, nous avons amélioré l'extraction de connaissances de Genie afin que la gestion se produise dans le cadre d'une utilisation régulière. Pendant chaque session de chat, Genie extrait des informations sémantiques, propose des extraits de connaissances concis et, une fois que l'utilisateur approuve, les enregistre dans le magasin. 

Associée à la surveillance d'activité intégrée et aux boucles de rétroaction, l'utilisation quotidienne devient elle-même un pipeline d'apprentissage continu qui maintient le modèle sémantique de Genie précis sans refonte périodique.

Recherche approfondie de Genie

Bien que la disponibilité générale de Genie soit une étape importante, nous ne ralentissons pas notre parcours pour réinventer la BI avec une approche axée sur l'IA. Nous sommes ravis d'annoncer l'aperçu de Genie Deep Research – un nouveau mode dans Genie conçu pour répondre à des questions plus complexes et en plusieurs étapes. Jusqu'à présent, Genie était optimisé pour les questions « ce qui s'est passé » (par exemple, « Quel est notre pipeline de ventes ? »). Pour répondre aux questions « pourquoi » et « comment » (par exemple, « Pourquoi les ventes sont-elles en baisse ? » ou « Comment pouvons-nous augmenter notre pipeline ? »), les utilisateurs devaient formuler leurs propres hypothèses et demander à Genie de tester chacune individuellement. Avec Deep Research, Genie tirera parti des dernières avancées en matière de recherche LLM pour aborder ces types de questions en produisant un plan de recherche et en analysant plusieurs hypothèses en parallèle avant de résumer les résultats.

Comme pour le reste de Genie, Deep Research s'appuiera sur et étendra le magasin de connaissances de Genie pour fournir des résultats précis et fiables. Genie fournira également explicitement des citations pour les conclusions qu'il a tirées et offrira des expériences simples en un clic pour examiner tout travail effectué en cours de route. Deep Research sera disponible en tant que fonctionnalité expérimentale pour les clients de Genie cet été. 

Apporter Genie AI/BI à vos équipes commerciales 

L'une des rares préoccupations que nous avons entendues de la part des clients concernant le déploiement généralisé de Genie est que l'accès à l'IA/BI a jusqu'à présent nécessité de naviguer dans l'espace de travail technique Databricks — une expérience qui peut sembler intimidante pour les utilisateurs commerciaux non techniques. Dans le cadre de nos annonces du Data and AI Summit, nous introduisons également Databricks One — une nouvelle expérience qui donne aux équipes commerciales un accès simple et sécurisé aux tableaux de bord IA/BI et aux espaces Genie, ainsi qu'aux applications Databricks. Tout comme l'IA/BI, Databricks One est disponible gratuitement pour tous les clients Databricks SQL.  

En savoir plus

Genie AI/BI et les tableaux de bord sont désormais disponibles pour les clients Databricks SQL sans licence supplémentaire requise.  Si vous souhaitez en savoir plus, vous pouvez consulter la page Web AI/BI Genie et commencer par explorer le contenu suivant :

1. Documentation : Plongez dans les détails avec notre documentation.
2. Démonstrations : Regardez nos vidéos de démonstration, faites des visites de produits et obtenez des tutoriels pratiques pour voir ces IA/BI en action.
3. Formation : Commencez avec une formation gratuite sur les produits via Databricks Academy
4. eBook : Téléchargez l'eBook Business Intelligence Meets AI

Si vous n'êtes pas déjà un client Databricks, vous pouvez également tester Genie et d'autres produits Databricks en vous inscrivant à un essai gratuit.

(Cet article de blog a été traduit à l'aide d'outils basés sur l'intelligence artificielle) Article original