Unity Catalog

データと AI のための
統合ガバナンス

無料トライアルデモを見る

Unity Catalog is a unified governance solution for all data and AI assets including files, tables, machine learning models and dashboards in your lakehouse on any cloud.

データと AI のガバナンスを一元化

ANSI SQL をベースとする共通のガバナンスモデルにより、あらゆるクラウド上のファイル、テーブル、ダッシュボード、ML モデルを一元管理できます。

データ検索・発見機能の統合による効率化

データ資産全体からデータを迅速に検索・発見して分析できることで、生産性が高まります。

性能とスケーラビリティ

低レイテンシでのメタデータの供給とテーブルの自動調整により、クエリ性能が向上します。

リアルタイムなデータリネージの自動生成

SQL、R、Python、Scala のワークロードや、テーブル、Notebook、ワークフロー、ダッシュボードなど、あらゆるタイプのデータに対する高粒度で自動化されたリネージにより、透明性の高い統合ビューでデータエコシステム全体を把握できます。

現行ツールとの統合

現行のデータカタログやガバナンスソリューションを活用する柔軟性により、将来を見据えたデータと AI ガバナンスを可能にします。
背景

仕組み

データ資産を一元管理

オープンスタンダードの ANSI SQL をベースとする共通のガバナンスモデルにより、あらゆるクラウド上のファイル、テーブル、ダッシュボード、ML モデルのガバナンスを簡素化します。アクセスポリシーは、アカウントレベルで一度定義するだけで、あらゆるワークロードとワークスペースに適用できます。Unity Catalog はさらに、データに対するアクションの監視ログによって高粒度な一元監視を可能にし、コンプライアンスや監査の面でも効果をもたらします。

詳細なアクセス制御

標準 SQL 関数を使用して行フィルタや列マスクを定義し、行や列に対する詳細なアクセス制御を設定できます。属性ベースのアクセス制御がサポートされており、カスタムタグ(属性)を使用したアクセス制御を定義することで、データのスチュワードシップがさらにシンプルになります。

セキュアな統合データ検索

データアナリスト、データエンジニア、データサイエンティストは、統合データ検索機能により、データ資産全体から関連データを迅速に検索・発見、分析できます。Unity Catalog は、セキュアなデータ検索をデフォルトとしています。ユーザーのアクセス権限に基づいて検索結果を制限することで、プライバシーを考慮したセキュリティを確実にしています。

クエリ性能をあらゆる規模で強化

Unity Catalog は、低レイテンシでのメタデータの供給、テーブルの自動調整により、クエリ性能を向上させ、あらゆる規模のクエリ実行を高速化します。非同期の自動データ圧縮機能により、ファイルサイズを最適化し、バックグラウンドで自動的に入出力(I/O)のレイテンシを低減します。

リアルタイムなデータリネージの自動生成

SQL、Python、Scala、R のあらゆるワークロードに対するリアルタイムなデータリネージの自動生成により、レイクハウス上のデータフローをエンドツーエンドで可視化できます。レイクハウス上のデータフローをエンドツーエンドで可視化できます。データ品質の検証、データ変更の影響分析、データパイプラインのエラーのデバッグを迅速に実行できます。テーブル、列、Notebook、ワークフロー、ダッシュボードに関するリネージのメリットを享受できます。Unity Catalog のリネージグラフは権限を認識し、ユーザーのアクセス権限に基づいてリネージグラフへのアクセスを制御します。リネージ情報は REST API を介して取得できるため、他のカタログとの統合が可能です。

組織内でのセキュアなデータ共有

Unity Catalog は、セキュアなデータ共有のための世界初のオープンプロトコルであるDelta Sharing をネイティブにサポートしています。Data Sharing により、Delta Lake および Apache Parquet 形式の既存データをあらゆるコンピューティングプラットフォームで容易に共有できます。データを消費するユーザーは、Databricks プラットフォームを利用している必要はなく、そもそもクラウドを利用している必要もありません。他のシステムにレプリカの作成やコピーをしなくても、ライブデータを共有できます。Power BI、Tableau、Spark、pandas、Java とのネイティブ統合により、共有されたデータを任意のツールから直接利用できます。また、共有データのガバナンス、監査、使用状況の追跡は 1 つのプラットフォームで一元管理できます。

背景

現行のツールとのシームレスな統合

Unity Catalog を現行のデータカタログ、データストレージシステム、ガバナンスソリューションと連携し、高価な移行コストをかけずに現行の環境で将来性のあるガバナンスモデルを構築できます。

データ/クラウドのストレージ

データガバナンス/カタログのパートナー

導入事例


logo color compass
“Unity Catalog helped us simplify data management and access controls across the company. The Compass data team has securely onboarded 100+ data sources, migrated all workspaces to Unity Catalog, and created a gold layer for key stakeholders to tap into, to gain insights into areas like customer, product, usage, revenue, and more — creating a single source of truth, with complete access controls across the company.”
— Rajesh Nagpal, Senior Director of Data Engineering

ロゴ グラマリー
「Unity Catalog により、ロールベースのアクセス制御の実装が大幅に簡素化され、カタログ、データベース、テーブル、列レベルでのデータ保護が可能になりました。ユーザーごとのアクセス権限をシームレスに付与し、データへのアクセスを堅牢でセキュアに管理できるため、厳しいコンプライアンスやプライバシーの要件を満たすことができます。」
Grammarly データプラットフォーム部門エンジニアマネージャー Chris Locklin 氏

ロゴ Millman
「Unity Catalog の導入により、アクセス管理が簡素化され、ストレージの複雑さが軽減できたため、膨大なデータ資産へのアクセスが容易になりました。また、ヘルスケアに関する厳しい規制要件への対応や、データ探索のコラボレーション、顧客のニーズにあわせた迅速なスケーリングも可能になっています。」
Millman クラウドソリューションアーキテクト Dan McCurley 氏

logo color rivian
“Unity Catalog is enabling us to build a next-generation platform that unlocks the full potential of software-defined vehicles that evolve and improve as they rack up miles – enhancing the driving experience for customers and maximizing the environmental benefits of electrified transportation. We now have a centralized data catalog and access management across various teams and workspaces, which has opened up unprecedented opportunities for collaboration and innovation.”
— Venkat Sivasubramanian, Senior Director, Big Data

ロゴ ワーナーブラザーズ
「Unity Catalog は、私たちにとってゲームチェンジャーとなりました。アナリストは、Databricks のワークスペースで AWS の外部テーブルにリアルタイムにアクセスし、Delta Lake のテーブルと結合できるようになりました。Glue テーブルを移行することなく、Databricks SQL の性能のメリットを享受できます。データを移動しなくても、チーム間のコラボレーションができるようになりました。」
ワーナー・ブラザーズ・ディスカバリー エンジニアリング部門マネージャー Rajat Gupta 氏

無料お試し・その他のご相談を承っております