メインコンテンツへジャンプ

Machine Learning at Scale - Japanese

このコースでは、Apache Spark のアーキテクチャと、Databricks における機械学習ワークロードへの応用について、理論的および実践的な知識を習得します。データ準備、モデルのトレーニング、およびデプロイメントに Spark を活用するタイミングを学ぶとともに、Spark ML および pandas APIs on Spark を使った実践的な経験を積みます。また、ハイパーパラメータチューニングや Spark を用いた Optuna のスケーリングといった高度な概念についても学習します。さらに、包括的なモデルのパッケージングとガバナンスのために、アソシエイトコースで紹介された MLflow や Unity Catalog などの機能および概念を活用します。


注:SCORM形式の講義ファイルをご利用の際は、コンテンツをすべて終了した後、必ずSCORMウィンドウを閉じてください。「next lesson」ボタンをクリックしないでください。クリックすると、SCORMモジュールが完了として認識されなくなる可能性があります。

Skill Level
Professional
Duration
2h
Prerequisites

このコンテンツは、以下のスキル/知識/能力を持つ参加者向けに開発されています。

• Databricks Data Intelligence Platform および基本的なワークスペース操作(クラスターの作成、ノートブックでのコードの実行、基本的なノートブック操作、Git からのリポジトリのインポート)に関する知識

• Pandas、NumPy などのデータ操作ライブラリおよび Scikit-Learn などの機械学習フレームワークを含む、Python の中級プログラミング経験

• DataFrames、変換処理、および分散データ処理のためのアクションを含む、Apache Spark および PySpark の基礎に関する基本的な知識

• モデルのトレーニング、評価、ハイパーパラメータチューニング、およびデプロイメントワークフローを含む、機械学習の概念に関する理解

• テーブルの作成、更新の実行、ファイルの最適化、タイムトラベル機能など、Delta Lake 操作に関する中級レベルの経験

• エクスペリメントのトラッキング、モデルのロギング、およびモデルレジストリの操作における MLflow の基本的な知識

• クラスターアーキテクチャ、並列化、スケーラビリティに関する考慮事項など、分散コンピューティングの概念に関する理解

• Spark 環境内でのデータのクエリおよび操作のための SQL の基本的な知識

Self-Paced

Custom-fit learning paths for data, analytics, and AI roles and career paths through on-demand videos

See all our registration options

Registration options

Databricks has a delivery method for wherever you are on your learning journey

Runtime

Self-Paced

Custom-fit learning paths for data, analytics, and AI roles and career paths through on-demand videos

今すぐ登録

Instructors

Instructor-Led

Public and private courses taught by expert instructors across half-day to two-day courses

今すぐ登録

Learning

Blended Learning

Self-paced and weekly instructor-led sessions for every style of learner to optimize course completion and knowledge retention. Go to Subscriptions Catalog tab to purchase

Purchase now

Scale

Skills@Scale

Comprehensive training offering for large scale customers that includes learning elements for every style of learning. Inquire with your account executive for details

Upcoming Public Classes

Omnigent Basics - Japanese

このコースは、DatabricksのオープンソースメタハーネスであるOmnigentの入門コースです。AIエージェントの構築・ガバナンス・コラボレーションをDatabricks プラットフォーム上で行う方法を学びます。ハーネスとは何か、そしてメタハーネスが既存のエージェントツールの上位に位置してそれらを相互運用可能にする仕組みについて理解し、Omnigentの3つの柱であるCombine、Control、Shareを探索します。インタラクティブな講義とラボを通じて、Databricks サンドボックス上でOmnigentセッションを開始し、アプリケーションをvibe-codeして共有し、ポータブルなYAMLエージェントを宣言し、ステートフルなコンテキストポリシーを適用(致命的なトリフェクタおよびプロンプトインジェクションへの防御を含む)し、組み込みのPollyおよびDebbyエージェントを操作します。このコースを修了すると、Omnigent、Unity Gateway、およびDatabricks サンドボックスを使用してAIエージェントを調整・ガバナンスする方法を理解できるようになります。

注:SCORM形式の講義ファイルをご利用の際は、コンテンツをすべて終了した後、必ずSCORMウィンドウを閉じてください。「next lesson」ボタンをクリックしないでください。クリックすると、SCORMモジュールが完了として認識されなくなる可能性があります。

Free
3h
Professional
Data Engineer

Data Ingestion with Lakeflow Connect - Japanese

このコースでは、幅広いソースから Databricks へのデータ取り込みを実現する、スケーラブルで簡素化されたソリューションである LakeFlow Connect について包括的に紹介します。まず、LakeFlow Connect のさまざまなコネクタの種類(Standard および Managed)を探索し、バッチ、インクリメンタルバッチ、ストリーミングインジェストなど、さまざまなデータ取り込み手法を学びます。また、UC テーブルの使用とメダリオンアーキテクチャの主なメリットについても確認します。

次に、LakeFlow Connect Standard Connectors を使用してクラウドオブジェクトストレージからデータを取り込む実践的なスキルを習得します。具体的には、CREATE TABLE AS SELECT(CTAS)、COPY INTO、Auto Loader などの手法を扱い、それぞれのアプローチのメリットと考慮事項を重点的に学びます。また、Databricks Data Intelligence Platform へのデータ取り込み時に、ブロンズレベルのテーブルにメタデータカラムを追加する方法も学習します。続いて、rescued data カラムを使用してテーブルスキーマに一致しないレコードを処理する方法と、このデータを管理・分析するための戦略について説明します。さらに、半構造化 JSON データの取り込みとフラット化の手法についても探索します。

その後、LakeFlow Connect Managed Connectors を使用して、データベースおよび Software-as-a-Service(SaaS)アプリケーションからデータを取り込むエンタープライズグレードのデータ取り込みを実行する方法を探索します。また、Partner Connect を取り込みワークロードにパートナーツールを統合するオプションとして紹介します。

最後に、MERGE INTO 操作や Databricks Marketplace の活用を含む代替取り込み戦略を取り上げ、現代のデータエンジニアリングのユースケースをサポートするための強固な基盤を身に付けます。

注:SCORM講義ファイルの場合、コンテンツを完了したらSCORMウィンドウを閉じてください。「次のレッスン」ボタンはクリックしないでください。クリックすると、SCORMモジュールが完了として記録されない場合があります。

Languages Available: English | 日本語 | Português BR | 한국어 | 普通话

Free
4h
Associate

Questions?

If you have any questions, please refer to our Frequently Asked Questions page.