AI/BI Genie がついに一般提供開始！あなたのデータに、“聞けば答える魔法”を。

昨年の6月、我々はDatabricks AI/BIを発表し、ビジネスインテリジェンスカテゴリーへの参入を果たしました。これは、あなたのデータ、セマンティクス、使用パターンを深く理解するAIを中心に構築され、Data Intelligence Platformを最大限に活用するために、最初から設計されました。AI/BIはDashboardsを通じて従来のBI体験を提供するだけでなく、Genieという機能も備えており、これは自然言語を通じて自分自身のデータに関する質問に答えることを可能にする会話型の分析体験です。今日、我々はAI/BI GenieがAI/BI Dashboardsと同様に全てのクラウドで一般に利用可能になることをお知らせすることを大変嬉しく思います。

Genieとは何ですか？

その核心において、AI/BI Genieはユーザーが自然言語で質問をし、データから即座に洞察を得ることを可能にします。ビジネスユーザーは「私の営業パイプラインはどうなっていますか？」のような質問をし、Genieはテキストの要約、表形式のデータ、視覚化の組み合わせで答えます。各回答には、その結果に対する信頼を得るために、どのように答えを導き出したかの説明も提供します。

Genieの目標は、実際の世界で広告されている通りに実行される会話型の分析体験を提供することです。それは、あなたの組織のユニークなコンテキスト内で正確で関連性のある信頼できる回答です。これは、最新かつ最高のLLMにとっても挑戦であり、それらは各組織のデータとビジネスに特有のコンテキストやセマンティクスを理解していません。

AI/BI Genieは、分析者がデータ（テーブルやビューなど）とセマンティクス（メトリック定義、サンプルクエリ、テキスト指示、認定資産など）を特定のトピック（例えば、営業パイプライン）に焦点を当てたGenieスペースにパッケージ化することで、この問題を解決します。

Genieのスペースはローカルの知識ストアとして機能し、Data Intelligence Platform上の既存の資産から抽出されたセマンティクスと、専門家のアナリストによって提供されるキュレーションとフィードバックを結びつけます。本質的に、このシステムはデータアナリストが自分たちと同じようにデータの問いに答えることができる知識豊富なエージェントを作成することで、彼らの影響力を拡大することを可能にします。それはビジネスユーザーが既存のダッシュボードやレポートでカバーされていない問いを自己サービスすることを可能にし、アナリストがより高価値の仕事に集中することを可能にします。

発表以降の更新

私たちがAI/BI Genieを昨年6月に発表して以来、プレビューカスタマーからのフィードバックに基づいて、より多くの機能、信頼性のある回答品質、洗練されたユーザーエクスペリエンスを導入するために一生懸命働いてきました。以下にいくつかのハイライトを紹介します：

• 最高クラスの精度:   Genie製品チームにとって、応答品質は最優先事項であり、私たちの焦点は数千のアクティブな顧客から浮上した現実の問題に対処することにあります。例えば、私たちは値の辞書という概念を追加しました。これにより、下記の例で示すように、Genieは「first level group」のリクエストを、基礎となるデータに基づいて「1st line support group」という文字列にセマンティックにマッチさせることができます。また、Genieは現在、はるかに大きなデータセット（ゼロ列制限なし）、複雑な指示を処理することができ、複数のモデル更新サイクルを経ています。

• Unity Catalog Metric Views: GenieはData Intelligence Platform上にネイティブに構築されており、その基盤をさらに拡大しています。例えば、Unity Catalog Metricsのサポートを追加し、顧客がガバナンスされた信頼性のあるデータモデルを使用して、重要なユースケースの精度を確保することができます。AI/BI Genieを使用すると、Unity Catalogはデータとセマンティクスの両方の一元的な真実の源として機能し、冗長なモデリングの必要性を排除します。
• 評価とベンチマークのサポート：熟練したエンジニアは、どんなAIの取り組みも評価フェーズから始めるべきだと言います。それをしないということは、プロダクションでの失敗を意味します。会話型の分析体験も同じで、新しいGenieのスペースを作成するとき、あなたは実際には特定のドメインの新しいAIシステムを作成しています。これが、私たちがベンチマークとレビューの依頼などの機能を追加した理由です。Genieのベンチマークは、期待されるSQLの回答を持つキュレーションされたテストの質問で、著者が時間をかけてGenieの回答の精度を系統的に評価し改善することを可能にします。一方、「レビューの依頼」は、エンドユーザーが特定の回答をスペース管理者による確認や修正のためにフラグ付けすることを可能にし、ビジネスユーザーとデータチーム間の信頼と協力を促進します。

• Genie File Uploadを使用したアドホック分析：プレビュー期間中に発見した一般的な分析パターンの一つは、ローカルのスプレッドシート（例えば、キャンペーンからのリードリスト）とUnity Catalogの管理データセット（例えば、Salesforceのアカウントとコンタクト）を組み合わせてアドホックタスクを完了する必要性でした。Genie File Uploadを使用すると、ExcelやCSVファイルをGenieにドラッグアンドドロップするだけで、自然言語を通じて包括的な分析を完了することができます。

• Genieの普及: ダッシュボードとGenieは一緒に使うことでより効果的です。そのため、すべてのAI/BIダッシュボードには統合されたGenieスペースが含まれています。ダッシュボードは探索可能なデータを表示し、Genieはユーザーが事前に定義されたスライス、フィルター、組み合わせの制限を超えて行くことを可能にします。これらはすべて同じ体験の中で行われます。さらに、新しいGenie Conversation APIsを使用すると、開発者は同様にGenieをSlack、Microsoft Teams、カスタム内部アプリケーションなどのコラボレーションツールに組み込むことができます。これにより、ビジネスユーザーが会話型分析にアクセスする新たな方法が開かれ、作業の流れの中でコンテキストを切り替えたり、別のインターフェースにログインすることなくアクセスできます。

また、改善された視覚化から再設計されたユーザーインターフェースまで、さまざまな他の強化を提供しました。これにより、エンドユーザーが分析を通じてガイドされます。我々はGA後もこの高い機能速度を維持する予定ですので、AI/BIリリースノートをチェックし、時間とともに機能を追加し続けるための更なるブログをお待ちください。

Genieを使った現実世界での成功

Genieの急速な採用に私たちは大いに興奮しています。プレビュー期間中に4000以上の顧客がAI/BI Genieを採用しましたこれはデータを民主化し、非技術的なユーザーを強化するためです。以下は、プレビューカスタマーが私たちとGenieについて共有してくれた一部のサンプルです。

GenieはHPのチームを強化する方法を変えています。その直感的な自然言語インターフェースにより、ユーザーが即座に重要なデータにアクセスできるようにし、コーディング不要で、データ駆動型の洞察をより迅速かつ効率的に提供しています。  — Bruce Hillsberg, VP, データエンジニアリング＆インサイト, テクノロジー＆イノベーション, HP Inc

ユーザーは常にアナリストに問い合わせていました-ねえ、南西地域の売上は昨年と比べてどうだったの？-正しいアナリストを探して、彼らが正しい答えを出すことを期待するのではなく、Genieにただ尋ねることができるという考えは、ビジネスにとって非常にエキサイティングでした。  — シャーミア・ミルザ、データ、AI/ML、R&Dのシニアディレクター、7-Eleven

マーケティングや財務のエグゼクティブや他のLOBリーダーは、Genieを使って必要なデータにただの平易な英語を使ってアクセスすることができます。まさに信じられないほどです。  — セガヨーロッパ データサービス部門長 Felix Baker 氏

私たちには、Genieを使用して大成功を収めた他の多くの顧客がいます。例えば、Premier Inc、Magic Orange、The AA、そしてCasas Bahiaなどがあります。私たちは、Genieを一般に利用可能にすることで、これらの組織に参加するより多くの組織を支援することに興奮しています。

次世代知識ストア

Genieの中心はその知識ストアであり、これはGenieのAIシステムが質問に答えるたびに参照する生きたセマンティックモデルです。我々は現在、著者がはるかに細かい粒度で、はるかに少ない労力で知識をキュレーションできるようにする、我々の知識ストアの次世代をリリースしています。著者は、列レベルの同義語やサンプル値、およびテーブルレベルのコンテキスト（例えば、主キー/外部キーの結合や認定メトリクスなど）を含むデータアセットに直接知識を追加することができます。Genieの複合AIシステムは、各質問に対して正確な答えを提供するための適切な知識の部分を取得することができます。

これらの強化にもかかわらず、セマンティクスのキュレーションはまだ面倒な作業です。このプロセスを大幅に簡単にするために、Genieは現在知識マイニング と抽出を行っています。

ナレッジマイニング（上記）は、Unityカタログの系譜とクエリ履歴をGenieが探索し、Unityカタログのガバナンス保証を保持しながら、新しい指示を提案したり、知識ストアへの昇格を促す再発パターンを強調したりすることを可能にします。これにより、スペースオーナーの手動キュレーションが大幅に削減されます。

また、我々は多くの顧客が、知識ストアをブートストラップするための以前の参照がない場合の新規ユースケースでGenieを活用しています。これらのケースを処理するために、我々はGenieの知識抽出を強化し、キュレーションが通常の使用の一部として行われるようにしました。チャットセッションの度に、Genieはセマンティック情報を抽出し、簡潔な知識スニペットを提案し、ユーザーが承認するとストアにコミットします。

組み込まれたアクティビティ監視とフィードバックループと組み合わせることで、日々の使用自体が、Genieのセマンティックモデルを定期的な大規模改修なしに正確に保つ継続的な学習パイプラインとなります。

Genie Deep Research

GenieのGAは重要なマイルストーンである一方、私たちはAIファーストのアプローチでBIを再構想する旅路を緩めることはありません。私たちは、Genie Deep Researchのプレビューを発表することを楽しみにしています。これはGenieの新しいモードで、より複雑な、複数のステップを必要とする質問に対応するように設計されています。 これまでのところ、Genieは「何が起こったか」の質問（例えば、「私たちの販売パイプラインは何ですか？」）に最適化されていました。「なぜ」や「どうやって」の質問（例えば、「なぜ売上が下がっているのですか？」や「どうやって私たちのパイプラインを増やすことができますか？」）に答えるためには、ユーザーが自分自身の仮説を形成し、それぞれを個別にGenieにテストさせる必要がありました。Deep Researchでは、Genieは最新のLLM研究の進歩を活用して、これらのタイプの質問に取り組む 研究計画を作成し、複数の仮説を並行して分析する ことで、結果をまとめます。

Genieの他の部分と同様に、Deep ResearchはGenieの知識ストアを基にして構築し、正確で信頼性のある結果を提供します。Genieはまた、結論を導き出したための明確な引用を提供し、途中で行われた作業を詳細に調査するための簡単なワンクリック体験を提供します。Deep Researchは、今夏後半にGenieの顧客に対して実験的な機能として提供される予定です。

AI/BI Genie をビジネス部門へ

これまで Genie's の導入に際して、お客様からよくいただいていた懸念のひとつは、
AI/BI にアクセスするためには、技術者向けの Databricks ワークスペースを操作しなければならない点でした。
非技術系のビジネスユーザーにとっては、やや敷居の高い体験になっていたのです。

そこで今回の Data + AI Summit に合わせて発表されたのが、Databricks One です。
これは、ビジネスチームが AI/BI ダッシュボードや Genie スペース、Databricks Apps に簡単かつ安全にアクセスできる新しいユーザー体験です。

しかも、AI/BI Genie と同様に、Databricks SQL をご利用中のすべてのお客様に無償で提供されます。

Databricks One によって、ビジネスユーザーでも直感的に AI の力を活用し、
組織全体でデータドリブンな意思決定が可能になります。

もっと知りたい！

AI/BI Genieとダッシュボードは、追加のライセンスなしでDatabricks SQLの顧客に利用可能です。詳細を知りたい方は、AI/BI Genieのウェブページをチェックし、以下のコンテンツを探索して始めてみてください:

1. ドキュメンテーション：我々のドキュメンテーションで詳細を深く探求してください。
2. デモ：我々のデモビデオを視聴し、製品ツアーを受け、ハンズオンチュートリアルを取得して、これらのAI/BIを実際に操作してみてください。
3. トレーニング：Databricks Academyを通じて無料の製品トレーニングを開始します
4. eBook：ビジネスインテリジェンスがAIと出会うeBookをダウンロードします

Databricksの既存の顧客でない場合でも、無料トライアルにサインアップすることでGenieや他のDatabricks製品を試すことができます。