Revenir au contenu principal

Agent Evaluation on Databricks - French

Ce cours apprend aux étudiants à évaluer systématiquement les agents IA à l’aide du cadre d’évaluation de MLflow, en répondant aux défis propres aux systèmes d’IA non déterministes que les tests logiciels traditionnels ne peuvent pas gérer. Les étudiants apprennent à mettre en œuvre différentes approches d’évaluation, notamment des juges intégrés pour des critères courants tels que l’exactitude et la sécurité, des juges de directives pour des exigences propres à l’entreprise, et des juges personnalisés pour des besoins spécialisés. Le cours couvre à la fois l’évaluation hors ligne à partir d’ensembles de données organisés et le monitoring en ligne en production, avec une expérience pratique des capacités de traçage de MLflow pour comprendre les schémas d’exécution des agents et recueillir les retours humains de différents types de parties prenantes. À travers des démonstrations pratiques et des laboratoires, les étudiants développent des compétences pour créer des workflows d’évaluation qui favorisent l’amélioration continue de la qualité tout au long du cycle de vie de développement des agents IA.


Remarque : Databricks Academy passe à un format basé sur des notebooks pour les sessions en classe dans l’environnement Databricks, et n’utilise plus de diaporamas pour les cours. Vous pouvez accéder aux notebooks de cours dans l’environnement de laboratoire Vocareum.

Skill Level
Associate
Duration
4h
Prerequisites
Dans ce cours, le contenu a été conçu pour des participants disposant des compétences, connaissances et aptitudes suivantes :

Expérience intermédiaire de la programmation Python

• Connaissances de base en SQL pour interroger et créer des fonctions

• Familiarité avec la Plateforme d’intelligence des données de Databricks

• Compréhension des concepts d’Unity Catalog, y compris les catalogues et les schémas

• Compréhension de base des grands modèles de langage (LLM) et de l’ingénierie des invites

• Connaissances de base de MLflow

Outline

1. Principes fondamentaux de l’évaluation des agents IA

• Le défi de l’évaluation des agents IA

• Démo : configuration de l’agent

• Le cadre d’évaluation de MLflow


2. Principes fondamentaux de l’évaluation des agents IA

• Juges intégrés

• Démo : utilisation des juges intégrés de MLflow

• Juges basés sur des directives

• Démo : juges basés sur des directives avec MLflow

• Juges personnalisés et retours

• Démo : juges personnalisés avec MLflow

• Laboratoire : application de l’évaluation des agents


3. Juges personnalisés et retours humains

• Stratégies d’évaluation hors ligne et en ligne

• Laboratoire : retours des développeurs et des SME avec MLflow

Public Class Registration

If your company has purchased success credits or has a learning subscription, please fill out the Training Request form. Otherwise, you can register below.

Private Class Request

If your company is interested in private training, please submit a request.

See all our registration options

Registration options

Databricks has a delivery method for wherever you are on your learning journey

Runtime

Self-Paced

Custom-fit learning paths for data, analytics, and AI roles and career paths through on-demand videos

Inscrivez-vous maintenant

Instructors

Instructor-Led

Public and private courses taught by expert instructors across half-day to two-day courses

Inscrivez-vous maintenant

Learning

Blended Learning

Self-paced and weekly instructor-led sessions for every style of learner to optimize course completion and knowledge retention. Go to Subscriptions Catalog tab to purchase

Purchase now

Scale

Skills@Scale

Comprehensive training offering for large scale customers that includes learning elements for every style of learning. Inquire with your account executive for details

Upcoming Public Classes

Machine Learning with Databricks - French

Bienvenue dans Machine Learning with Databricks !

Ce cours est votre porte d'entrée vers la maîtrise des workflows de machine learning sur Databricks. Plongez dans la préparation des données, le développement de modèles, le déploiement et les opérations, guidé par des instructeurs experts. Apprenez les compétences essentielles pour l'exploration des données, l'entraînement des modèles et les stratégies de déploiement adaptées à Databricks. À la fin du cours, vous disposerez des connaissances et de la confiance nécessaires pour naviguer dans l'ensemble du cycle de vie du machine learning sur la plateforme Databricks, ce qui vous permettra de créer et de déployer efficacement des solutions de machine learning robustes.

Remarque: Databricks Academy passe à un format basé sur des cahiers de travail pour les sessions en présentiel au sein de l'environnement Databricks, et abandonne ainsi l'utilisation de présentations PowerPoint pour les cours magistraux. Vous pouvez accéder aux cahiers de travail des cours dans l'environnement de laboratoire Vocareum.

Data Preparation for Machine Learning

Ce cours se concentre sur les fondamentaux de la préparation des données pour le machine learning avec Databricks. Les participants acquerront les compétences essentielles pour explorer, nettoyer et organiser les données en vue d'applications de machine learning traditionnelles. Les sujets clés comprennent la visualisation des données, l'Ingénierie des caractéristiques et les stratégies optimales de stockage des fonctionnalités. Grâce à des exercices pratiques, les participants acquerront une expérience concrète dans la préparation efficace de jeux de données pour le machine learning au sein de Databricks. Ce cours est conçu pour les data scientists de niveau associé et les praticiens du machine learning, ainsi que pour les personnes souhaitant renforcer leurs compétences en préparation des données, garantissant ainsi une base solide pour le déploiement Réussi d'un Modèle de machine learning.

Machine Learning Model Development

Ce cours complet offre un guide pratique pour développer des modèles de machine learning traditionnels sur Databricks, en mettant l'accent sur des démonstrations pratiques et des workflows utilisant les bibliothèques de ML les plus courantes. Les participants exploreront des techniques de ML essentielles, notamment la régression et le clustering, tout en tirant parti des puissantes capacités de Databricks. Le cours couvre l'intégration de MLflow pour le suivi des modèles, le Databricks Feature Store pour la gestion des features, et Optuna pour l'optimisation des hyperparamètres. Les participants apprendront en outre à accélérer le développement de modèles avec Genie Code, l'assistant de codage IA de Databricks qui utilise le langage naturel, des connexions MCP, des instructions et des compétences pour guider l'ensemble du cycle de vie du ML. À la fin du cours, les apprenants disposeront de compétences pratiques et concrètes pour développer, optimiser et déployer efficacement des modèles de machine learning dans l'environnement Databricks.

Machine Learning Model Deployment

Ce cours est conçu pour présenter trois stratégies principales de déploiement de machine learning et illustrer la mise en œuvre de chacune de ces stratégies sur Databricks. Après une exploration des fondamentaux du déploiement de modèles, le cours aborde le batch inference, en proposant des démonstrations pratiques et des travaux dirigés pour l'utilisation d'un modèle dans des scénarios de batch inference, ainsi que des considérations relatives à l'optimisation des performance. La deuxième partie du cours couvre de manière exhaustive le déploiement de pipeline, tandis que le dernier segment se concentre sur le déploiement en temps réel. Les participants s'engageront dans des démonstrations pratiques et des travaux dirigés, en déployant des modèles avec Model Serving et en utilisant le serving endpoint pour l'inférence en temps réel.

Machine Learning Operations

Ce cours guidera les participants à travers une exploration complète des opérations de Modèle de machine learning, en mettant l'accent sur le MLOps et la gestion du cycle de vie des modèles. La première partie couvre les composants essentiels du MLOps et les meilleures pratiques, offrant aux participants une base solide pour opérationnaliser efficacement les Modèles de machine learning. Dans la seconde partie du cours, nous aborderons les fondamentaux du cycle de vie des modèles, en démontrant comment le parcourir de manière fluide en utilisant le Model Registry conjointement avec Unity Catalog pour une gestion efficace des modèles. À la conclusion du cours, les participants auront acquis des DNT pratiques ainsi qu'une compréhension approfondie des principes du MLOps, dotés des compétences nécessaires pour naviguer dans le paysage complexe des opérations de Modèle de machine learning.

Languages Available: English | 日本語 | Português BR | 한국어

Paid
16h
Lab
instructor-led
Associate

Questions?

If you have any questions, please refer to our Frequently Asked Questions page.