Unity Catalog は、主要なクラウド上のレイクハウスのファイル、テーブル、ML モデルなど、あらゆるデータと AI のための統合ガバナンスソリューションです。
“Unity Catalog distills permissioning into its important pieces by removing the complexity introduced by IAM policies and other data control platforms, allowing us to focus on what is important to our business use case.”
— Joseph Kesting, Software Engineer
仕組み
データ資産を一元管理
オープンスタンダードの ANSI SQL をベースとする共通のガバナンスモデルにより、あらゆるクラウド上のファイル、テーブル、ダッシュボード、ML モデルのガバナンスを簡素化します。アクセスポリシーは、アカウントレベルで一度定義するだけで、あらゆるワークロードとワークスペースに適用できます。Unity Catalog はさらに、データに対するアクションの監視ログによって高粒度な一元監視を可能にし、コンプライアンスや監査の面でも効果をもたらします。
詳細なアクセス制御
標準 SQL 関数を使用して行フィルタや列マスクを定義し、行や列に対する詳細なアクセス制御を設定できます。Databricksが拡張性と統合性を向上させる機能を構築し続ける中、今後登場する属性ベースのアクセス制御では、カスタムタグ（属性）に基づいたアクセスポリシーを定義することができます。
セキュアな統合データ検索
データアナリスト、データエンジニア、データサイエンティストは、統合データ検索機能により、データ資産全体から関連データを迅速に検索・発見、分析できます。Unity Catalog は、セキュアなデータ検索をデフォルトとしています。ユーザーのアクセス権限に基づいて検索結果を制限することで、プライバシーを考慮したセキュリティを確実にしています。
クエリ性能をあらゆる規模で強化
Unity Catalog は、低レイテンシでのメタデータの供給、テーブルの自動調整により、クエリ性能を向上させ、あらゆる規模のクエリ実行を高速化します。非同期の自動データ圧縮機能により、ファイルサイズを最適化し、バックグラウンドで自動的に入出力（I/O）のレイテンシを低減します。
「Unity Catalogのおかげで、全社的なデータ管理とアクセス制御を簡素化することができました。Compassのデータチームは、100以上のデータソースを安全に取り込み、すべてのワークスペースをUnityカタログに移行し、主要な関係者が利用できるゴールドレイヤーを作成して、顧客、製品、利用、収益などの分野の洞察を得ることができました。" 全社のアクセス制御により、真実のシングルソースを作成することができました。
「Unity Catalog は、私たちにとってゲームチェンジャーとなりました。アナリストは、Databricks のワークスペースで AWS の外部テーブルにリアルタイムにアクセスし、Delta Lake のテーブルと結合できるようになりました。Glue テーブルを移行することなく、Databricks SQL の性能のメリットを享受できます。データを移動しなくても、チーム間のコラボレーションができるようになりました。」
既存のツールとのシームレスな統合
Unity Catalog は、既存のデータカタログ、データストレージシステム、ガバナンスソリューションと連携するため、既存の投資を活用し、高額な移行コストをかけずに将来を見据えたガバナンスモデルを構築できます。
