OneLake連携がもっと身近に：Unity Catalogのサポート拡張

今日は、オープンスタンダードと、より広いデータコミュニティにとって重要な節目となる一日です。
私たちは Microsoft と協力し、Unity Catalog と OneLake の両方で管理されるデータを、オープンスタンダードを通じて統合できるよう取り組んでいます。Unity Catalog Open API の仕様により、ゼロコピーで双方向にデータをやり取りできるインターフェースが提供され、どちらのプラットフォーム上のエンジンからでも、レイクハウスエコシステム全体へアクセスできるようになります。

この約 10 年間、Databricks と Microsoft は、レイクハウスのオープン性と柔軟性を通じて、お客様がデータの価値を引き出せるよう協力してきました。
そして今日、このパートナーシップはさらに前進し、複数のプラットフォームにまたがってデータへアクセスし、ガバナンスを効かせる方法について、お客様にこれまで以上の選択肢を提供できるようになります。

オープンな相互運用性への道

Delta LakeやIcebergなどのオープンなテーブル形式が採用されるにつれて、カタログレベルで新たなサイロが出現しました。これに対処するため、DatabricksはUnity Catalog Open APIsをローンチし、データとAIにわたる統一されたガバナンスのためのオープンな標準を確立すると同時に、表形式データ向けのIceberg REST APIも完全にサポートしました。このデュアルAPIアプローチにより、組織はクラス最高のソリューションを導入してベンダーロックインを回避しながら、 多くのデータプラットフォームやSaaSアプリケーション間でデータをシームレスに共有できます。 また、すべてのデータプラットフォームにわたる統制された単一のビューを提供するために、カタログフェデレーションも導入しました。カタログフェデレーションを強化するオープンAPIsというこのモデルは、相互運用性のための業界標準となっています。

本日、このオープンなビジョンが、パートナーである Microsoft によって実証されたことを大変嬉しく思います。

Microsoft が Unity Catalog Open APIs のサポートを追加

パートナーである Microsoft と本日発表したように、私たちのコラボレーションは深化しています。

MicrosoftはすでにOneLake MirroringによるAzure Databricksからの読み取りをサポートしており、FabricエンジンはUnity Catalogで管理されているすべてのデータにシームレスにアクセスできます。  独自のプラットフォームとの他の OneLake 統合とは異なり、この機能により、Unity Catalog 内のすべてのデータ（最高のパフォーマンスを発揮するテーブルを含む）が、コピー、コード変更、追加コストなしで OneLake で利用できるようになります。

本日、Microsoft と Databricks は、よりネイティブに統合することで、そのオープン性をさらに拡張しています。Microsoft OneLakeがUnity Catalog Open API標準のサポートを追加したことで、Azure DatabricksユーザーはOneLakeからデータをシームレスに読み取れるようになります。

OneLake が Iceberg REST や Unity Catalog Open APIs などのオープン カタログ APIs のサポートを追加したことで、Microsoft は、Dynamics、Dataverse、Blob store などのサービスからの OneLake の構造化および非構造化データを、Databricks を含むオープンな lakehouse エコシステム全体でネイティブにアクセスできるようにしています。

オープンな基盤の上に築く Databricks

この拡張機能を活用して、DatabricksはUnity CatalogですべてのOneLakeデータをシームレスに利用できるようにするサポートを追加します。

これにより、Databricks 内から OneLake のデータをゼロコピーで読み取ることが可能になり、両プラットフォーム間でのシームレスな相互運用性とアクセスが保証されます。Databricks の顧客は Microsoft エコシステム内のすべてのデータにアクセスし、最先端の AI、machine learning、大規模なデータエンジニアリングのワークロードを強化できるようになります。

カタログの統合

1. FabricでのUnity Catalogからの読み取り – 一般提供開始
   MicrosoftはAzure Databricksミラーリングをリリースしました。顧客は、Unity Catalogを通じてAzure DatabricksのデータをOneLakeにミラーリングすることで、Azure Databricksが管理するすべてのデータをMicrosoft Fabricのワークロード全体で即座に利用できるようにします。両方のプラットフォームは、データを移動することなく、同じデータのコピー上で作業できます。
2. Azure Databricks での OneLake からの読み取り - 2025年末 
   この新機能により、Azure Databricks は Unity Catalog Open APIs 経由で OneLake からデータを読み取ることができ、お客様のすべての OneLake データを Databricks でシームレスに活用できるようになります。顧客は、EntraIDのマネージドIDに基づいてOneLakeへのUnity Catalog接続を作成し、任意のFabric workspaceのデータアイテムをUnityのカタログとして直接、シームレスにマウントできます。

Azure Databricks での OneLake データへの接続

未来はオープン

このマイルストーンは、業界がオープンで相互運用可能なデータ エコシステムに向けてどれだけ進歩したかを示しています。顧客はもはや、イノベーションと相互運用性の間で選択する必要はありません。両方を手に入れることができます。

Microsoft がオープン カタログ標準を採用した今、 私たちはこの基盤の上でデータと AI の未来を構築し続けることに胸を躍らせています。  統合の深化に伴い、Azure DatabricksによるOneLakeへの直接的なデータ書き込みのサポートなど、今後の発表やロードマップの更新にご期待ください。

Azure Databricksを無料でstart →