Databricksマネージドのアシスタントの発表

Databricks内で完全にホストおよび管理されるDatabricks Assistantのパブリックプレビューの提供を発表できることを嬉しく思います！このバージョンでは、AssistantはDatabricks Model Servingを支えるのと同じセキュアなインフラストラクチャを活用し、Databricksがホストするモデルのみを使用します。この強化により、すべてのお客様は、データ処理が確実にDatabricksアカウント内にとどまる形で、AI支援機能の恩恵を最大限に享受できます。

Databricks Assistant

Databricks Assistantは、エンタープライズデータのための最高のAI支援生産性ツールを構築することを目指して開発されました。プレビュー以降の採用は驚くべきものでした。Assistantは、Databricksで最も急速に成長している機能の1つとなり、毎週17万人以上のユーザーが、コードの自動生成と修正、エラーのトラブルシューティング、さらには可視化とダッシュボードの作成に活用しています。

主な特徴と機能

パブリックプレビューは、米国およびEU地域のAWSユーザー向けにDatabricks Assistant Quick Fixのみを提供して開始します。プレビューの進行に伴い、Databricks Assistantチャットやノートブック、ファイルエディタ、SQL Editor内のインラインアシスタントも含まれるように拡張される予定です。

なお、現在のプレビューにはAI/BIダッシュボードやGenieは含まれていませんのでご注意ください。

モデルとModel Serving

このプレビューでは、DatabricksがホストするモデルとModel Servingエンドポイントを活用し、Foundation Model APIのクエリに使用されるのと同じセキュアで管理されたインフラストラクチャを利用します。Assistantの提供開始以来、コード対話に最適なモデルを探求し、AI生成コメントや自動補完などの各種機能向けにDatabricksホストのモデルをすでに展開しています。

このプレビューでは、オープンソースAIの新基準を確立したMeta Llama 3を使用しています。ユーザーに最高のパフォーマンスを提供するため、新たなモデルの継続的な評価に取り組んでいます。このアプローチにより、シームレスな統合が保証されるだけでなく、レイテンシーを最小限に抑えることで速度も向上します。

セキュリティとプライバシーの強化

このプレビューでは、Databricksによって完全に管理・保護されたモデルサービングエンドポイントを使用し、外部モデルプロバイダーへの依存を排除することで、お客様のデータが保管時、転送時、使用時を問わずDatabricksアカウント内に確実に留まるようにしています。エンドポイントはステートレスで、複数層の分離によって堅牢なセキュリティを確保しています。

Databricks Assistantは、当初からエンタープライズワークロードの要件を満たすよう設計されています。AssistantはUnity Catalogのガバナンスに従い、高度に規制された業界のコンプライアンス基準を満たしています。お客様のデータは他のお客様と共有されることはなく、モデルの学習に使用されることもありません。信頼性と安全性に関する私たちのコミットメントの詳細については、Databricks Trust and Safetyドキュメントをご参照ください。

今後の開発

パートナー提供のAI設定で提供される機能と完全に同等になるまで、段階的にAssistantの機能を追加していく予定です。また、すべてのクラウドプラットフォームでこのバージョンを利用可能にし、特定のCompliance Security Profile (CSP)ワークスペースでも有効にする予定です。

使用開始方法

Assistantは、パートナー提供の設定が無効になっている場合にのみ、Databricksがホストおよび管理するモデルを使用します。パートナー提供の設定が有効になっているお客様の場合、この設定は影響を及ぼしません。米国およびEU地域のすべてのAWSワークスペースは自動的にパブリックプレビューに登録されますが、必要に応じて管理者がプレビューポータルから無効にすることができます。他の地域のAWSユーザーもプレビューポータルからパブリックプレビューに登録できますが、パブリックプレビューは米国およびEU地域でのみホストされていることにご注意ください。

Databricks Assistantの動作については、製品ページをご確認ください。AssistantはDatabricks Intelligence Platformを基盤とし、データのセキュリティを確保し、正確でパーソナライズされた応答を提供します。自然言語でタスクを記述するだけで、AssistantがSQLクエリを生成し、複雑なコードを説明し、エラーを自動的に修正します。