Developing Applications with Apache Spark™ - Japanese

このコースでは、Databricks Data Intelligence Platformを使用してシンプルなデータエンジニアリングワークフローを実行し、データウェアハウジングの取り組みをサポートできるようにする基本的なスキルを学びます。 ワークスペースのツアーが行われ、カタログ、スキーマ、ボリューム、テーブル、コンピューティング クラスター、Databricks Notebooks など、Databricks のオブジェクトの操作方法が示されます。 次に、基本的なデータ エンジニアリング ワークフローに従って、テーブルの作成と操作、Delta Lake へのデータの取り込み、メダリオン アーキテクチャによるデータの変換、Databricks Workflows を使用したデータ エンジニアリング タスクのオーケストレーションなどのタスクを実行します。 また、Databricks が Databricks SQL、Lakeflow 宣言型パイプライン、Unity Catalog を使用してデータウェアハウジングのニーズをサポートする方法についても説明します。 

Databricks Labs サブスクリプションを購入すると、コースの最後には、ライブの Databricks Workspace 環境で学んだことを実践するための包括的なラボ演習も行われます。

Languages Available: English | 日本語 | Português BR | 한국어

このコースでは、セキュアなデータガバナンス、アクセスコントロール、リネージトラッキングのためのUnity Catalogを中心に、スケーラブルなデータワークフローのためのレイクハウスアーキテクチャとメダリオン設計を探求します。カリキュラムには、Delta Lakeを使用した信頼性の高いACID準拠のパイプラインの構築も含まれます。パーティショニング、キャッシング、クエリチューニングなどのSpark最適化テクニックを検証し、パフォーマンスモニタリング、トラブルシューティング、効率的なデータエンジニアリングとアナリティクスのベストプラクティスを学び、現実世界の課題に取り組みます。

このコースでは、Apache Spark を使用したストリーム処理と解析の基本について学習します。 ストリーム処理の基礎をしっかりと理解し、Spark 構造化ストリーミング API を使用してアプリケーションを開発します。 ストリーム集約やウィンドウ分析などの高度な手法を探索して、リアルタイム データを効率的に処理します。 このコースでは、動的データ環境向けにスケーラブルでフォールトトレラントなストリーミングアプリケーションを作成するスキルを身に付けます。