Deploy Workloads with Lakeflow Jobs - Japanese

Lakeflow ジョブを使用したワークロードのデプロイコースでは、Lakeflow ジョブを Databricks エコシステム内の統合オーケストレーションプラットフォームとして使用して、データ、分析、AI workflowsをオーケストレーションおよび自動化する方法を学びます。

- Directed Acyclic Graphs (DAG) を使用してデータワークロードを設計および実装し、さまざまなスケジュールオプションを構成し、条件付きタスク実行、run-if 依存関係、for each ループなどの高度なワークフロー機能を実装する方法を学習します。

- このコースでは、適切なコンピューティングの選択、モジュラーオーケストレーション、エラー処理技術、フォールトトレラント設計など、すべてがDatabricks Data Intelligence Platformにネイティブに統合された、堅牢で本番環境に対応したパイプラインを作成するためのベストプラクティスについて説明します。

Skill Level

Associate

Duration

Prerequisites

⇾ 「データエンジニアリングのためのDatabricks入門」コースを修了しているか、Databricks Data Intelligence Platform についてしっかりと理解している

⇾ Databricks Workspace, Apache Spark, Delta Lake, メダリオンアーキテクチャのナビゲートや Unity Catalog などのトピックに関する基本的な理解を持っている

⇾ Python/PySpark に精通している

⇾ 中級レベルのSQLクエリを作成した経験がある。

Outline

データエンジニアリング入門 Databricks

⇾ データエンジニアリング Databricks

⇾ Lakeflow ジョブとは何ですか?

Lakeflow ジョブズコアコンポーネント

⇾ 構成要素 Lakeflow ジョブ

⇾ タスクのオーケストレーション

⇾ ジョブの作成Lakeflow ジョブ UI

作成とジョブのスケジューリング

⇾ 共通タスク構成オプション

⇾ ジョブ・スケジュールとトリガー

⇾ スケジューラによるワークロードの自動化トリガー

高度なLakeflow ジョブの機能

⇾ 条件付きタスクと反復タスク

⇾ タスクの失敗の処理

⇾ Lakeflow ジョブ本番

⇾ ベストプラクティス

Upcoming Public Classes

Date	Time	Language	Price
Date	Time	Language	Price	Apr 14	02 PM - 06 PM (Asia/Tokyo)	Japanese	$750.00

Public Class Registration

If your company has purchased success credits or has a learning subscription, please fill out the Training Request form. Otherwise, you can register below.

Customer registration Partner registration

Private Class Request

If your company is interested in private training, please submit a request.

Request Private Training

See all our registration options

Registration options

Databricks has a delivery method for wherever you are on your learning journey

Self-Paced

Custom-fit learning paths for data, analytics, and AI roles and career paths through on-demand videos

今すぐ登録

Instructor-Led

Public and private courses taught by expert instructors across half-day to two-day courses

今すぐ登録

Blended Learning

Self-paced and weekly instructor-led sessions for every style of learner to optimize course completion and knowledge retention. Go to Subscriptions Catalog tab to purchase

Purchase now

Skills@Scale

Comprehensive training offering for large scale customers that includes learning elements for every style of learning. Inquire with your account executive for details

Upcoming Public Classes

Apache Spark Developer

Apache Spark™ Programming with Databricks - Japanese

このコースは、Databricksを使ったApache Sparkプログラミングを学ぶための適切な入口となります。

以下では、このコースに含まれる4つのモジュール（4時間）について説明します。

Introduction to Apache Spark

この初心者向けのコースでは、大規模なデータ処理のための Apache Spark の基礎について説明します。 Spark の分散アーキテクチャを探索し、DataFrame API をマスターし、Python を使用してデータの読み取り、書き込み、処理する方法を学習します。実践的な演習を通じて、Sparkの変換とアクションを効率的に実行するために必要なスキルを身に付けます。

Developing Applications with Apache Spark

このハンズオンコースでは、Apache Spark を使用したスケーラブルなデータ処理を習得します。 Spark の DataFrame API を使用して、効率的な ETL パイプラインを構築し、高度な分析を実行し、分散データ変換を最適化する方法を学びます。グループ化、集計、結合、集合演算、ウィンドウ関数について調べます。配列、マップ、構造体などの複雑なデータ型を操作しながら、パフォーマンス最適化のベストプラクティスを適用します。

Stream Processing and Analysis with Apache Spark

このコースでは、Apache Spark を使用したストリーム処理と解析の基本について学習します。ストリーム処理の基礎をしっかりと理解し、Spark 構造化ストリーミング API を使用してアプリケーションを開発します。ストリーム集約やウィンドウ分析などの高度な手法を探索して、リアルタイムデータを効率的に処理します。このコースでは、動的データ環境向けにスケーラブルでフォールトトレラントなストリーミングアプリケーションを作成するスキルを身に付けます。

Monitoring and Optimizing Apache Spark Workloads on Databricks

このコースでは、セキュアなデータガバナンス、アクセスコントロール、リネージトラッキングのためのUnity Catalogを中心に、スケーラブルなデータワークフローのためのレイクハウスアーキテクチャとメダリオン設計を探求します。カリキュラムには、Delta Lakeを使用した信頼性の高いACID準拠のパイプラインの構築も含まれます。パーティショニング、キャッシング、クエリチューニングなどのSpark最適化テクニックを検証し、パフォーマンスモニタリング、トラブルシューティング、効率的なデータエンジニアリングとアナリティクスのベストプラクティスを学び、現実世界の課題に取り組みます。

Languages Available: English | 日本語 | 한국어

Data Warehousing with Databricks - Japanese

このコースは、Databricksのデータウェアハウジング機能を探索したいデータ専門家向けに設計されています。 Databricksに関する予備知識がないと仮定して、最新のクラウドベースのデータウェアハウジングソリューションとしてDatabricksを活用する方法を紹介します。学習者は、業界標準の TCP-DI データセットを参考にして、Databricks Data Intelligence Platform を使用してデータを効率的に取り込み、変換、管理、分析する方法を探ります。学習者は、自然言語クエリによるデータ探索を簡素化する革新的な Databricks 機能である Genie についても学習します。このコースを修了すると、受講者は Databricks を使用してデータウェアハウスを実装および最適化するための基本的なスキルを身に付けることができます。

Languages Available: English | 日本語 | Português BR | 한국어

AI/BI for Data Analysts - Japanese

このコースでは、Databricks が提供する機能を使用してビジネスインテリジェンスのニーズに対応する方法を学習します。 AI/BI ダッシュボードと AI/BI Genie。 Databricks データアナリストは、プラットフォーム内に AI/BI ダッシュボードと AI/BI Genie Spaces を作成し、関係者や必要な関係者によるこれらの資産へのアクセスを管理し、これらの資産が編集、更新、または廃止されたときに、そのライフサイクル全体にわたって維持する任務を負います。このコースでは、ビジネスインサイトのためのダッシュボードを設計し、それをコラボレーターや利害関係者と共有し、それらの資産をプラットフォーム内で維持する方法を参加者に指示することを目的としています。また、Databricks Data Intelligence Engineを活用した環境の構築と保守を通じて、AI/BI Genie Spacesを活用してセルフサービスアナリティクスをサポートする方法も学びます。