Google Cloud 上の Databricks 活用したデータエンジニアリング、データサイエンス、分析

コードサンプルや Notebook を含むデータエンジニアリングとデータサイエンスのユースケース

本資料では、Databricks on Google Cloud を利用する際の参考にしていただける実用的なユースケースおよび、コードサンプル、Notebook の例をご紹介しています。

次のユースケースを詳しく解説しています。

• データエンジニア向け：Delta Lake on Google Cloud Storage を基盤としてデータパイプラインを構築し、Databricks や BigQuery を通じて取得したデータを Looker で視覚化。
• データサイエンティスト向け：マネージド MLflow による実験追跡の自動化、MLflow モデルレジストリによる MLflow モデルのバージョン管理、BigQuery への推論結果の出力。