Databricks、AIエージェントの評価を強化するためQuotient AIを買収

Databricksは、AIエージェントの評価と強化学習のイノベーターであるQuotient AIの買収を発表します。Quotientは、企業が本番運用におけるエージェントの挙動を監視し、重大な問題を検出し、それらのシグナルを使ってエージェントのパフォーマンスを継続的に改善することを支援します。組織がビジネスに不可欠なワークフローにAIエージェントを導入する際、それらのシステムが実際の環境で期待どおりに機能することを保証する、信頼性の高い方法が必要となります。DatabricksにQuotientを導入することで、継続的な評価と学習を通じてGenie、Genie Code、Agent Bricksを強化します。これにより、開発者と組織は、時間とともに精度、信頼性、専門性が向上するAIエージェントを活用できるようになります。

AIエージェントの**本番運用**における課題解決
企業がAIエージェントをパイロットから本番環境へと移行させる中で、新たな課題が生まれています。それは、大規模な環境でパフォーマンスを確実に測定、デバッグし、改善するにはどうすればよいか、という点です。エージェントは、モデル、メモリ、ツール、スキル、その他のコンポーネントで構成される複雑な複合システムであるため、チームは品質を評価するだけでなく、障害の根本原因を迅速に知見を得る必要もあります。システムの障害を解釈できる堅牢な評価システムがなければ、パフォーマンスを改善するための問題修正が遅くなり、製品リーダーは自信を持って本番運用にリリースできなくなります。

Quotient のご紹介
Quotient は、エージェント評価と継続的学習におけるギャップを埋めるために構築されました。GitHub Copilotの品質向上を主導したエンジニアによって設立されたチームは、大規模なAIシステムの測定と改善に関する深い専門知識を有しています。Quotient プラットフォームは、本番運用システムからの完全なエージェント トレースを分析し、ハルシネーション、推論の失敗、不適切なツールの使用などの問題を検出します。これらのシグナルは自動的にクラスタリングされ、エージェントの監視とファインチューニングに使用できる構造化された評価データセットと報酬シグナルに変換されます。このアプローチにより、組織はエージェントの行動を観察するだけでなく、それを体系的に改善することが可能となり、AIシステムが実世界の利用から継続的に学習するドメインエキスパートになることを支援します。

Quotient + Databricks 
Databricks は、AI エージェントを評価・改善するための強力なツールをすでに提供しています。Quotient を導入することで、当社は継続的な評価と改善のレイヤーを組み込み、プラットフォーム全体の機能を強化して、顧客に、より正確で信頼性の高い AI システムを提供します。これにより、Databricks 全体の 3 つの主要な製品分野が強化されます。

• Genieは、あらゆる従業員が自身のデータと対話し、知見を得ることができるAIエージェントです。
• Genie Code は、本日ローンチされた自律型 AI エージェントで、データチームによるデータエンジニアリング、machine learning、アナリティクス ワークフローの計画、構築、ランを支援します。
• Agent Bricks を使用すると、組織は自社のデータで高品質なエージェントを容易に構築・拡張できます。

企業全体で AI エージェントが担う責任が大きくなるにつれて、組織は信頼できるシステムを必要としています。Quotient の機能と Databricks AI の研究およびプラットフォームを組み合わせることで、顧客は、本番運用で実行されるだけでなく、時間とともに改善される AI エージェントをデプロイできます。

Databricksは、エージェントシステムを大規模に開発、デプロイ、改善するための最も信頼性の高いプラットフォームを構築し続けており、この度Quotientチームを迎えられることを大変嬉しく思います。

詳細については、Databricks AI 研究および Genie Code のローンチをご覧ください。

(このブログ記事はAI翻訳ツールを使用して翻訳されています) 原文記事