Databricks acquiert Quotient AI pour optimiser les évaluations d'agents d'IA

Databricks a le plaisir d'annoncer l'acquisition de Quotient AI, une entreprise innovante dans le domaine de l'évaluation et de l'apprentissage par renforcement pour les agents d'IA. Quotient aide les entreprises à superviser le comportement des agents en production, à détecter les problèmes critiques et à utiliser ces signaux pour améliorer en continu les performances des agents. À mesure que les organisations déploient des agents d'IA dans des workflows critiques pour l'activité, elles ont besoin de moyens fiables pour s'assurer que ces systèmes fonctionnent comme prévu dans le monde réel. En intégrant Quotient à Databricks, nous renforçons Genie, Genie Code et Agent Bricks avec une évaluation et un apprentissage continus, offrant ainsi aux développeurs et aux organisations des agents d'IA qui deviennent plus précis, fiables et spécialisés au fil du temps.

Relever le défi de la mise en production des agents IA
Un nouveau défi émerge alors que les entreprises font passer les agents IA des projets pilotes à la production : comment mesurer, déboguer et améliorer de manière fiable les performances en Monter en charge. Comme les agents sont des systèmes composés complexes de modèles, de mémoire, d'outils, de compétences et d'autres composants, les équipes doivent non seulement évaluer la qualité, mais aussi obtenir rapidement un insight sur la cause première des défaillances. Sans un système d'évaluation robuste capable d'interpréter les défaillances du système, la résolution des problèmes pour améliorer les performances devient lente et les chefs de produit manquent de confiance pour procéder à la mise en production.

Présentation de Quotient
Quotient a été conçu pour combler les lacunes en matière d'évaluation des agents et d'apprentissage continu. Créée par les ingénieurs qui ont dirigé l'amélioration de la qualité de GitHub Copilot, l'équipe apporte une expertise approfondie dans la mesure et l'amélioration des systèmes d'IA capables de monter en charge. La plateforme Quotient analyse les traces complètes des agents provenant des systèmes de production pour détecter des problèmes tels que les hallucinations, les échecs de raisonnement et l'utilisation incorrecte d'outils. Ces signaux sont automatiquement regroupés et transformés en jeux de données d'évaluation structurés et en signaux de récompense qui peuvent être utilisés pour superviser et affiner les agents. Cette approche permet aux organisations non seulement d'observer le comportement des agents, mais aussi de l'améliorer systématiquement, aidant ainsi les systèmes d'IA à devenir des experts du domaine qui apprennent en continu à partir de leur utilisation en conditions réelles.

Quotient + Databricks 
Databricks fournit déjà de puissants outils pour évaluer et améliorer les agents IA. Avec Quotient, nous renforçons ces capacités sur notre plateforme en intégrant une couche d'évaluation et d'amélioration continues qui fournit aux clients des systèmes d'IA plus précis et fiables. Cela renforce trois domaines de produits clés au sein de Databricks :

• Genie est un agent IA qui permet à n'importe quel employé de discuter avec ses données et d'en extraire des informations
• Genie Code, également lancé aujourd'hui, est un agent d'IA autonome qui aide les équipes de données à planifier, construire et exécuter des workflows de Data Engineering, de machine learning et d'analytique.
• Agent Bricks permet aux organisations de créer et de monter en charge facilement des agents de haute qualité sur leurs données

À mesure que les agents IA assument plus de responsabilités au sein de l'entreprise, les organisations ont besoin de systèmes auxquels elles peuvent faire confiance. En combinant les capacités de Quotient avec Databricks AI research et la plateforme, les clients peuvent déployer des agents d'IA qui non seulement s'exécutent en production, mais s'améliorent aussi au fil du temps.

Nous sommes ravis d'accueillir l'équipe Quotient au sein de Databricks et de continuer à bâtir la plateforme la plus fiable pour développer, déployer et améliorer les systèmes agentifs à monter en charge.

Pour en savoir plus, consultez Databricks AI et le lancement de Genie Code.

(Cet article de blog a été traduit à l'aide d'outils basés sur l'intelligence artificielle) Article original