メインコンテンツへジャンプ

Data Ingestion with Lakeflow Connect - Japanese

このコースでは、幅広いソースから Databricks へのデータ取り込みを実現する、スケーラブルで簡素化されたソリューションである LakeFlow Connect について包括的に紹介します。まず、LakeFlow Connect のさまざまなコネクタの種類(Standard および Managed)を探索し、バッチ、インクリメンタルバッチ、ストリーミングインジェストなど、さまざまなデータ取り込み手法を学びます。また、UC テーブルの使用とメダリオンアーキテクチャの主なメリットについても確認します。


次に、LakeFlow Connect Standard Connectors を使用してクラウドオブジェクトストレージからデータを取り込む実践的なスキルを習得します。具体的には、CREATE TABLE AS SELECT(CTAS)、COPY INTO、Auto Loader などの手法を扱い、それぞれのアプローチのメリットと考慮事項を重点的に学びます。また、Databricks Data Intelligence Platform へのデータ取り込み時に、ブロンズレベルのテーブルにメタデータカラムを追加する方法も学習します。続いて、rescued data カラムを使用してテーブルスキーマに一致しないレコードを処理する方法と、このデータを管理・分析するための戦略について説明します。さらに、半構造化 JSON データの取り込みとフラット化の手法についても探索します。


その後、LakeFlow Connect Managed Connectors を使用して、データベースおよび Software-as-a-Service(SaaS)アプリケーションからデータを取り込むエンタープライズグレードのデータ取り込みを実行する方法を探索します。また、Partner Connect を取り込みワークロードにパートナーツールを統合するオプションとして紹介します。


最後に、MERGE INTO 操作や Databricks Marketplace の活用を含む代替取り込み戦略を取り上げ、現代のデータエンジニアリングのユースケースをサポートするための強固な基盤を身に付けます。


注:SCORM講義ファイルの場合、コンテンツを完了したらSCORMウィンドウを閉じてください。「次のレッスン」ボタンはクリックしないでください。クリックすると、SCORMモジュールが完了として記録されない場合があります。


Languages Available: English | 日本語 | Português BR | 한국어 | 普通话

Skill Level
Associate
Duration
4h
Prerequisites
本コースのコンテンツは、以下のスキル、知識、能力を有する受講者向けに開発されています:


• Databricks Data Intelligence Platform(Databricks Workspaces、Apache Spark、Delta Lake、メダリオンアーキテクチャ、Unity Catalog を含む)に関する基本的な理解。

• データ取り込みワークフロー(バッチ、ストリーミング、インクリメンタル)および一般的な ETL の原則に関する基本的な理解。

• 各種ファイル形式(Parquet、CSV、JSON、TXT など)の取り扱い経験。

• SQL および Python の習熟度。

• Databricks ノートブックでのコード実行に関する知識。

Self-Paced

Custom-fit learning paths for data, analytics, and AI roles and career paths through on-demand videos

See all our registration options

Registration options

Databricks has a delivery method for wherever you are on your learning journey

Runtime

Self-Paced

Custom-fit learning paths for data, analytics, and AI roles and career paths through on-demand videos

今すぐ登録

Instructors

Instructor-Led

Public and private courses taught by expert instructors across half-day to two-day courses

今すぐ登録

Learning

Blended Learning

Self-paced and weekly instructor-led sessions for every style of learner to optimize course completion and knowledge retention. Go to Subscriptions Catalog tab to purchase

Purchase now

Scale

Skills@Scale

Comprehensive training offering for large scale customers that includes learning elements for every style of learning. Inquire with your account executive for details

Upcoming Public Classes

Data Engineer

Building Enterprise Applications with Databricks Apps - Japanese

このコースでは、開発者が Databricks プラットフォーム上で安全なデータおよび AI アプリケーションを直接構築・デプロイできるようにする新しい機能、Databricks Apps を紹介します。主に、組織内の非技術系ユーザーがデータの知見にアクセスできるカスタムアプリケーションを作成する必要があるデータサイエンティスト、データエンジニア、および開発者を対象としています。

コースはまず Databricks Apps の主要コンポーネントの概要から始まり、続いて外部サービスと連携するシンプルなアプリのデプロイを行います。次に、Databricks プラットフォームの機能と統合するインテリジェントなデータドリブンアプリケーションの構築とデプロイの方法を学びます。その後、Databricks 環境の外部でアプリを開発する方法を取り上げます。最後に、セキュアで信頼性の高いエンタープライズアプリを実装するためのベストプラクティスについて詳しく解説します。

注意:SCORM講義ファイルのコンテンツを完了したら、SCORMウィンドウを閉じてください。SCORMモジュールが完了として記録されない場合があるため、「次のレッスン」ボタンはクリックしないでください。

Free
2h
Associate

Building Databricks Apps with Genie Code and Lakebase - Japanese

Databricks Apps を使用すると、インタラクティブなデータおよび AI アプリケーションを Databricks プラットフォーム上で直接構築・デプロイすることができます。しかし、AI を活用した開発を成功させるには、単にコードを生成するだけでは不十分であり、効果的なワークフローを確立することが重要です。

このハンズオンコースでは、Genie Code を AI 開発アシスタントとして活用しながら、Lakebase をバックエンドとする Databricks App をゼロから構築します。その過程で、AI を活用した開発における実践的かつ再現可能なアプローチを習得します。具体的には、コードを生成する前に意図を明確に定義すること、小さく検証可能な単位で作業を進めること、再利用可能な Genie Code Skills を活用すること、そして AI が生成した出力をそのまま受け入れるのではなく、レビューおよび改善すべき対象として扱うことを学びます。

Databricks App の作成とデプロイ、トランザクションストアとしての Lakebase データベースのプロビジョニングと接続、CRUD 操作の実装、そして Genie Code を活用した一般的な開発タスクの効率化を行います。コースの終了時には、動作するアプリケーションが完成するだけでなく、将来のソフトウェアプロジェクトにおいて AI と効果的に協働するための実践的な Framework も身に付けることができます。

注:SCORM講義ファイルの場合は、コンテンツを完了した後、必ずSCORMウィンドウを閉じてください。「次のレッスン」ボタンはクリックしないでください。クリックすると、SCORMモジュールが完了として記録されない場合があります。

Free
2h
Associate

Questions?

If you have any questions, please refer to our Frequently Asked Questions page.