データプロバイダーとデータ利用者の両方のためのDatabricksマーケットプレイス理解ガイド
によって ティア・チャン, Darshana Sivakumar, ハリシュ・ガウル, Bemnet Merha 、 陳萌熙 による投稿
Databricks Marketplaceは、オープンソースのDelta Sharing標準によって支えられたデータ、分析、AIのためのオープンマーケットプレイスです。Databricks Marketplaceのリリース以来、リストとプロバイダーの数は300%増加しました。この急速な成長期を通じて、データパートナーとデータ消費者がDatabricks Marketplaceを最大限に活用するのを支援しました。
今日、最も頻繁に尋ねられる質問のトップ10を共有したいと思います。消費者とプロバイダーの両方に合わせてカスタマイズされ、私たちが何を異なるものにしているのか、リストをどのように目立たせるか、そして特定のデータニーズに最適な製品を見つける方法について詳しく読んでください。
Databricks Marketplaceには、データセット、MLモデル、ノートブック、ソリューションアクセラレータ、そして近々アプリケーションなど、様々な製品が含まれています。この多様性により、より広範な分析とAIイニシアチブをサポートし、データの価値を最大限に引き出すことができます。250以上のプロバイダーから2,500以上のリスティングが提供されています。
Databricksプラットフォーム上にいなくてもデータにアクセスできます。このオープンなアプローチによりベンダーロックインを避け、利用者が好みのツールとプラットフォームを使用できるため、柔軟性と統合性が向上します。
Delta Sharingを基盤としているため、複雑なETLプロセスや高価なデータ複製が不要です。Unity Catalogを使用して、レイクハウスデータと共にDatabricksマーケットプレイスのデータセットを管理できます。これにより運用負担が軽減され、データ管理やガバナンスではなく、データからの価値創出に集中できます。
Databricks MarketplaceはDelta Sharingによって動作しているため、オープンソースの柔軟性とベンダーロックインのない環境を利用できます。構造化データだけでなく、AIモデル、ノートブック、ボリュームや非構造化データ（画像/ビデオ/オーディオ）、ソリューションアクセラレータなど、多様なアセットを提供しています。これらは、PowerBIやSparkなどのさまざまな分析ツールを通じてアクセス可能です。例としては、Crisp（テーブル）、Shutterstock（ボリューム）、 AI21 Lab（AIモデル）、DatavantまたはLiveRamp（ソリューションアクセラレータ）、そして Kythera Labs（ノートブック）があります。
D2O (Databricks-to-Open)共有により、Databricks Marketplaceのプロバイダーが任意のプラットフォームやクラウドの受信者とデータを共有することを可能にし、あなたがDatabricks上にいることを必要としません。これにより、プロバイダーの対象市場が拡大し、Unity Catalogとの深い統合により、Databricksユーザーのガバナンスが強化されます。これらの機能は、柔軟性、オープン性、さまざまなデータと分析ニーズに対する包括的なサポートを強調し、さまざまなプラットフォームとツールを使用する幅広いユーザーに対応しています。
Databricks Marketplaceで最も適したデータ製品を特定するためには、まず分析目標とデータ要件を明確にします。プラットフォームのフィルタリング機能を利用して、製品、プロバイダー、カテゴリ、モデルタスク、リストの種類によって検索を絞り込むことができます。詳細な評価のために、利用可能な事前構築ノートブックとサンプルデータセットを活用してください。これらのリソースを使用すると、探索的データ分析を行い、データが特定のユースケースに適しているかどうかを評価することができます。
例えば、HealthVerity Claims Sample Patient Datasetには、その適用性を評価するための詳細なノートブックとユースケースが含まれています。技術者は、これらのノートブック内でサンプルクエリを実行し、データのスキーマ、品質、および潜在的な分析アプリケーションについての洞察を得ることができます。
データとAIの製品は、即時利用可能なリスティングとア クセス要求型の2種類で提供されています。即時利用可能なリスティングの場合、リスティングページの「即時アクセスを取得」ボタンをクリックし、利用規約に同意するだけでデータにすぐにアクセスできます。このタイプのリストは、通常、無料または公開データセットに使用され、プロバイダからの承認は必要ありません。無料のリストはすべてここで確認できます。
アクセス要求型のリスティングの場合、「アクセスを要求」ボタンをクリックし、基本情報と使用目的を提供し、プロバイダの承認を待ちます。プロバイダがあなたのリクエストのレビューを完了したら、メールで通知され、データへのアクセス方法についての指示を受け取ります。このタイプのリストは、データが商取引を伴う場合、特定のニーズに合わせてカスタマイズが必要な場合、またはマーケットプレイスのプラットフォーム外で最終化する必要がある他のビジネス契約が関与する場合に通常使用されます。
無料リスティングの例には、AccuWeatherの郵便番号別歴史的気象データセット、そしてアクセス要求型のリスティングには、IQVIA PharMetrics® Plus Claims Dataが含まれます。
Databricks Marketplaceのプライベートエクスチェンジ機能を利用して、プライベートなデータ共有を行います。これにより、データとAIの製品を特定の消費者グループだけに発見可能にすることができます。プライベートエクスチェンジを使用すると、大規模な組織内の異なる子会社や部門間、または異なる組織間でのデータ共有を、マーケットプレイスのようなインターフェースを通じて発見と実行を容易にすることができます。詳細は、このブログ投稿を参照してください。
データ製品を掲載するためのマーケットプレイスの選択肢は複数あります。しかし、Databricks Marketplaceは、プロプライエタリシステムを強制せずに、プロバイダーのデータをプラットフォーム、リージョン、クラウド全体で最大限に活用することで優れています。したがって、私たちはプロバイダーや受信者にプロプライエタリプラットフォームを採用することを強制していません。二つ目に、DatabricksはTCOを削減します。プラットフォームのDelta Sharingプロトコルにより、データプロバイダーはレプリケーションを必要とせずに、Databricks環境から直接ライブデータを共有することができます。最後に、プロバイダーはDatabricks MarketplaceでAIモデルを共有することができ、新たな収益源を開くことができます。
どのようにDeutsche Börseがクラウド環境間でのデータ共有を効率化し、2-4倍速い洞察と4-8倍速い公開を実現したかをご覧ください。別のDatabricksマーケットプレイスのプロバイダーであるAlliumは、Cloudflare R2とDelta Sharingを活用して年間645Kドルを節約し、月に1PBのデータを転送しています。
プロバイダーになるための2つの方法があります。公開リストを作成するには、単にDatabricks Data Partner Programを通じて申し込むだけです。承認されると、Unity Catalogが有効化されたDatabricksワークスペース内のプロバイダーコンソールにアクセスできます。特定のDatabricks受信者（クロスアカウントまたは内部）とのみデータを共有したい場合、またはマーケットプレイスの管理者である場合、プロバイダーコンソールを通じて直接プライベートエクスチェンジプロバイダーとして登録できます。
データ製品の販売は、しばしば高度にカスタマイズ可能であり、標準的な価格モデルに強制されるべきではないと理解しています。その柔軟性を確保するため、すべての商取引は直接プロバイダーと消費者の間で行われます。
Databricks Marketplaceでのデータ製品が効果的に潜在顧客に届くようにするために、新しくリリースされたProvider Analytics Dashboardを活用してください。このツールは、消費者の活動を監視し、どのリストが最も関心を引いているかを理解するために不可欠です。ダッシュボードからのメトリクスを分析することで、有望なリードを特定し、ライセンスと商用化についてのパーソナライズされた会話を開始することができます。このアプローチにより、データ製品取引のカスタマイズ可能な性質に合わせた柔軟でパーソナライズされた販売プロセスが可能となり、効果的なリード生成と顧客エンゲージメントを促進します。
リスティングに明確さと独自のカラーを加えるほど、適切な消費者を引きつけることができます！これは、各リスティングフィールドに詳細で正確な情報を持つこと、カテゴリータグと属性を使用して検索可能性を向上させることを意味します。また、サンプルノートブックを持つリストは、消費者が直接対話し、サンプルクエリを実行することを可能にすることで、より成功していることがわかりました。データの試用版を提供することで、潜在的な顧客があなたのデータの価値を探索し、体験することを促し、エンゲージメントとコンバージョン率を向上させることができます。
さらに、デモ、ウェビナー、チュートリアル、ブログ投稿などの教育リソースをリストに追加することで、ユーザーがあなたのデータセットを効果的に使用するプロセスをガイドするのが良いアイデアです。データエンジニアがあなたのデータを簡単に取得し、既存のシステムに統合する方法を示すデモを作成したり、データサイエンティストがあなたのデータセットを使用して機械学習モデルを訓練する方法を示すデモを作成します。
注目すべきリスティングとして、Corelogicの包括的なノートブック、Zoominfoの使用事例の詳細な説明と顧客ケーススタディの含まれた詳細な説明、そしてAI21 Labsの高度なAIモデルを紹介する広範なノートブックとブログがあります。
プロバイダーがDatabricksマーケットプレイスに資産を掲載する際の料金は無料です！私たちは無料と有料の両方のリスティングをホストしていますが、プロバイダーが受け取る収益の一部を取ることはありません。有料リスティングの取引は、消費者とプロバイダ間で直接行われます。
Databricks Marketplaceは、組織がデータ、AIモデル、分析ソリューションにアクセスし、それらを活用する方法を革新しています。ビジネスを変革するチャンスを逃さないでください - 今日DatabricksのOpen Marketplaceを探索し、共有と協力の力を解放しましょう！Databricks Marketplaceで探しているものが見つからない場合は、お知らせください！
ブログを購読して、最新の投稿を受信トレイにお届けします。