メインコンテンツへジャンプ

Feature Engineering at Scale - Japanese

このコースでは、Databricks プラットフォーム上でエンドツーエンドの特徴量エンジニアリングパイプラインを設計、スケール、および運用化する方法について包括的な理解を深めます。カリキュラムは3つの段階的なモジュールで構成されています。Spark の分散実行と最適化の基礎をマスターすること、Auto Loader と宣言型 LakeFlow パイプラインを使用したスケーラブルなデータ取り込みの実装、そして Databricks Feature Store を活用した本番運用グレードの MLOps への発展です。


Catalyst オプティマイザと Spark UI を使用した Spark パフォーマンスのデバッグ、自動品質チェックを備えたブロンズ・シルバー・ゴールドのメダリオンアーキテクチャの構築、SparkML を使用したスケーラブルな特徴量の変換処理の実装など、実践的な学習体験に取り組んでいただきます。コースの集大成として、Online Feature Store を通じたリアルタイムの特徴量サービングのデプロイ、オンデマンド変換処理を伴う FeatureSpec の定義、そして Unity Catalog によるガバナンスとリネージトラッキングの適用を行います。


コース修了時には、エンタープライズスケールでの機械学習における完全な特徴量ライフサイクルを管理する能力を身に付け、パフォーマンスが高く、信頼性があり、ガバナンスが整備された、本番運用に対応したパイプラインを設計できるようになります。


注:SCORM講義ファイルの場合は、コンテンツの完了後にSCORMウィンドウを閉じてください。‘Next Lesson’ボタンはクリックしないでください。クリックすると、SCORMモジュールが完了済みとして記録されない可能性があります。

Skill Level
Professional
Duration
3h
Prerequisites

このコンテンツは、次のスキル、知識、能力を持つ受講者向けに作成されています:

1.「Apache Spark 入門」コースを修了しているか、基本的なデータの変換処理や Spark SQL を含む Spark の基礎知識と同等の知識を持っていること。

   * 受講者は、分散データ処理における Spark の役割を理解していることが求められます。本コースはその基礎を踏まえ、Spark がスケーラブルな機械学習ワークフローをどのように実現するかを説明します。

2. `pandas`、`numpy`、`scikit-learn` などのライブラリを使用したデータ操作を含む、Python プログラミングの中級レベルの習熟度。

3. モデルのトレーニング、評価、ハイパーパラメータのチューニングを含む、従来の機械学習ワークフローに関する中級レベルの理解。

4. Databricks プラットフォームおよび Workflows に関する知識。

   * 受講者は、本コースの受講前に Databricks Machine Learning Associate コースを修了されることを強くお勧めします。本コースは、Databricks 環境を使用した機械学習開発の知識を前提としています。

Self-Paced

Custom-fit learning paths for data, analytics, and AI roles and career paths through on-demand videos

See all our registration options

Registration options

Databricks has a delivery method for wherever you are on your learning journey

Runtime

Self-Paced

Custom-fit learning paths for data, analytics, and AI roles and career paths through on-demand videos

今すぐ登録

Instructors

Instructor-Led

Public and private courses taught by expert instructors across half-day to two-day courses

今すぐ登録

Learning

Blended Learning

Self-paced and weekly instructor-led sessions for every style of learner to optimize course completion and knowledge retention. Go to Subscriptions Catalog tab to purchase

Purchase now

Scale

Skills@Scale

Comprehensive training offering for large scale customers that includes learning elements for every style of learning. Inquire with your account executive for details

Upcoming Public Classes

Agent Evaluation on Databricks - Japanese

このコースでは、従来のソフトウェアテストでは対応できない非決定論的なAIシステム固有の課題に取り組みながら、MLflowの評価Frameworkを使用してAIエージェントを体系的に評価する方法を学びます。受講者は、Unity Catalogに登録され、Unity Gatewayを通じてモデルを呼び出す共有ツール呼び出しエージェントを評価します。その際、正確性や安全性などの一般的な基準には組み込みジャッジを、ビジネス固有の要件にはガイドラインジャッジを、専門的なニーズにはカスタムジャッジを使用します。コースでは、厳選されたデータセットを使用したオフライン評価と、Unity CatalogへのMLflow Tracesの保存を含むオンライン本番運用モニタリングの両方を取り上げます。受講者はMLflow Tracingを使用してエージェントの実行パターンを把握し、開発者およびDatabricks Appを通じてエージェントをレビューする専門家から人間のフィードバックを収集します。実践的なデモとラボを通じて、AIエージェント開発ライフサイクル全体にわたって継続的な品質向上を促進する評価Workflowsを作成するスキルを習得します。

注:SCORM形式の講義ファイルをご利用の際は、コンテンツをすべて終了した後、必ずSCORMウィンドウを閉じてください。「next lesson」ボタンをクリックしないでください。クリックすると、SCORMモジュールが完了として認識されなくなる可能性があります。

Free
2h
Associate

Questions?

If you have any questions, please refer to our Frequently Asked Questions page.