メインコンテンツへジャンプ

Feature Engineering at Scale - Japanese

このコースでは、Databricks プラットフォーム上でエンドツーエンドの特徴量エンジニアリングパイプラインを設計、スケール、および運用化する方法について包括的な理解を深めます。カリキュラムは3つの段階的なモジュールで構成されています。Spark の分散実行と最適化の基礎をマスターすること、Auto Loader と宣言型 LakeFlow パイプラインを使用したスケーラブルなデータ取り込みの実装、そして Databricks Feature Store を活用した本番運用グレードの MLOps への発展です。


Catalyst オプティマイザと Spark UI を使用した Spark パフォーマンスのデバッグ、自動品質チェックを備えたブロンズ・シルバー・ゴールドのメダリオンアーキテクチャの構築、SparkML を使用したスケーラブルな特徴量の変換処理の実装など、実践的な学習体験に取り組んでいただきます。コースの集大成として、Online Feature Store を通じたリアルタイムの特徴量サービングのデプロイ、オンデマンド変換処理を伴う FeatureSpec の定義、そして Unity Catalog によるガバナンスとリネージトラッキングの適用を行います。


コース修了時には、エンタープライズスケールでの機械学習における完全な特徴量ライフサイクルを管理する能力を身に付け、パフォーマンスが高く、信頼性があり、ガバナンスが整備された、本番運用に対応したパイプラインを設計できるようになります。


注:SCORM講義ファイルの場合は、コンテンツの完了後にSCORMウィンドウを閉じてください。‘Next Lesson’ボタンはクリックしないでください。クリックすると、SCORMモジュールが完了済みとして記録されない可能性があります。

Skill Level
Professional
Duration
3h
Prerequisites

このコンテンツは、次のスキル、知識、能力を持つ受講者向けに作成されています:

1.「Apache Spark 入門」コースを修了しているか、基本的なデータの変換処理や Spark SQL を含む Spark の基礎知識と同等の知識を持っていること。

   * 受講者は、分散データ処理における Spark の役割を理解していることが求められます。本コースはその基礎を踏まえ、Spark がスケーラブルな機械学習ワークフローをどのように実現するかを説明します。

2. `pandas`、`numpy`、`scikit-learn` などのライブラリを使用したデータ操作を含む、Python プログラミングの中級レベルの習熟度。

3. モデルのトレーニング、評価、ハイパーパラメータのチューニングを含む、従来の機械学習ワークフローに関する中級レベルの理解。

4. Databricks プラットフォームおよび Workflows に関する知識。

   * 受講者は、本コースの受講前に Databricks Machine Learning Associate コースを修了されることを強くお勧めします。本コースは、Databricks 環境を使用した機械学習開発の知識を前提としています。

Self-Paced

Custom-fit learning paths for data, analytics, and AI roles and career paths through on-demand videos

See all our registration options

Registration options

Databricks has a delivery method for wherever you are on your learning journey

Runtime

Self-Paced

Custom-fit learning paths for data, analytics, and AI roles and career paths through on-demand videos

今すぐ登録

Instructors

Instructor-Led

Public and private courses taught by expert instructors across half-day to two-day courses

今すぐ登録

Learning

Blended Learning

Self-paced and weekly instructor-led sessions for every style of learner to optimize course completion and knowledge retention. Go to Subscriptions Catalog tab to purchase

Purchase now

Scale

Skills@Scale

Comprehensive training offering for large scale customers that includes learning elements for every style of learning. Inquire with your account executive for details

Upcoming Public Classes

Data Analyst

SQL Analytics on Databricks - Japanese

このコースでは、データ分析に Databricks を効果的に活用する方法を学びます。特に Databricks SQL に重点を置いた内容となっています。Databricks のデータアナリストとして、関連データの検索、潜在的な活用可能性の分析、そして価値あるビジネス上の知見を提供するフォーマットへの変換といった業務を担います。 

また、データオブジェクトの管理における自身の役割と、Databricks Data Intelligence Platform 内でノートブック、SQL エディター、Databricks SQL などのツールを使用してデータオブジェクトを操作する方法についても理解を深めます。 

さらに、データ資産およびプラットフォーム全体の管理における Unity Catalog の重要性についても学びます。最後に、Databricks がパフォーマンス最適化をどのように支援するかの概要を学び、Databricks 上で SQL アナリティクスを実行する際のバックグラウンドで行われるプロセスを把握するためのクエリー知見へのアクセス方法についても習得します。

注:SCORM形式の講義ファイルをご利用の際は、コンテンツをすべて終了した後、必ずSCORMウィンドウを閉じてください。「next lesson」ボタンをクリックしないでください。クリックすると、SCORMモジュールが完了として認識されなくなる可能性があります。

Languages Available: English | 日本語 | Português BR | 한국어 

Paid & Subscription
3h
Lab
Associate
Machine Learning Practitioner

Data Preparation for Machine Learning - Japanese

このコースでは、Databricks上での従来の機械学習に向けたデータ準備の基礎を学びます。受講者は、Unity Catalogで管理されるDeltaテーブルにデータを読み込み、ノートブック、組み込みの可視化ツール、およびGenie Codeを使って探索します。次に、クリーンデータの作成、欠損値や外れ値の処理、データリークのないデータの分割とサンプリングを行い、補完・エンコーディング・標準化のための再現可能なSpark 機械学習パイプラインを構築します。最後に、Unity Catalogの特徴量エンジニアリングを使用して機能を保存、管理、再利用します。これには、リークのないトレーニングセットのためのポイントインタイムルックアップと、Lakebaseを基盤とするOnline Feature Storeを使ったオンライン特徴量サービングの概要が含まれます。各モジュールは、講義とハンズオンデモ、およびサーバーレスコンピュート上で実行するラボを組み合わせた構成になっています。モデルのトレーニング、サービング、およびモニタリングはこのコースの対象外であり、それらはMachine Learning Model DevelopmentおよびMachine Learning Model Deploymentコースで学習します。このコースは、Databricks上でのデータ準備に関する確固たる基礎を身につけたいと考えるアソシエイトレベルのデータサイエンティストおよび機械学習実践者を対象としています。

注:

これは「Machine Learning with Databricks」シリーズの最初のコースです。SCORM講義ファイルでは、コンテンツを完了した後、SCORMウィンドウを閉じてください。「次のレッスン」ボタンはクリックしないでください。クリックすると、SCORMモジュールが完了として記録されない場合があります。
Paid & Subscription
3h
Lab
Associate

Questions?

If you have any questions, please refer to our Frequently Asked Questions page.