Lakeflow Connectの一般提供を発表しました！

ここで、SalesforceとWorkday向けのLakeflow Connectの一般提供を発表することを嬉しく思います。Lakeflow Connectは、人気のSaaSアプリケーション、データベース、ファイルソース向けのノーコード取り込みコネクタを導入し、スケーラブルな取り込みパイプラインを構築し、Databricks Data Intelligence Platformを使用してデータの全ての力を引き出すことができます。SalesforceとWorkdayのコネクタは、Lakeflow Connectの発表以来、最初にGAにリリースされた管理コネクタで、これからも多くのコネクタがリリースされる予定です。

Lakeflow Connectの管理データコネクタは、サーバーレスコンピューティングによって動作し、AWS、Azure、GCPで利用可能です。これらは、ガバナンス、観測可能性、エンタープライズセキュリティのためのデータインテリジェンスプラットフォームと完全に統合されています。

Lakeflow Connectは、Lakeflowという統一されたエンジニアリングソリューションの一部としてリリースされた3つのコンポーネントの最初の1つで、データの取り込み、変換、オーケストレーションを行います。それは、変換のためのDLTとオーケストレーションのためのDatabricks Workflowsとシームレスに連携します。

Porsche Holding、Insulet、Equiniti、Stroër SE & Co.、Flickなどの早期採用者はすでにLakeflow Connectを使用して、非常に困難なデータ課題の一部を解決しています。

データのサイロ化は、取り込みの複雑さと非効率性を引き起こします

今日、各APIがユニークで頻繁に変更されるため、SaaSアプリケーションの摂取パイプラインを自分で構築し、維持するのは難しいです。一方、データベースの取り込みはさらに複雑で、抽出ツールのための仮想マシン、ストリーミングのためのKafka、効率的な取り込みのための変更データキャプチャ（CDC）技術の深い理解など、追加のインフラが必要となることがよくあります。

結果として、組織はパイプラインのパッチワークを構築し、最適化し、維持するために多くの時間を費やします。これによりプロジェクトが遅延し、統治が難しい断片化したETLアーキテクチャが生じる可能性があります。これにより、高度にスキルを持つデータエンジニアがデータを移動させたり、パイプラインを監視したりする時間を割くことを強いられ、戦略的なイノベーションの開発に時間を割くことができません。

SalesforceとWorkdayの組み込みデータ取り込みサポート

Lakeflow Connectは、UIで数回クリックするか、コードを数行書くだけで、本番環境で使用できるパイプラインを簡単に作成することで、これらの課題を解消します。内部では、取り込みは効率的で、増分更新と最適化されたAPI使用が可能です。管理されたパイプラインが実行されると、私たちはスキーマの進化、シームレスなサードパーティAPIのアップグレード、組み込みアラートを備えた包括的な観測性を担当します。

"Salesforceコネクタを使用して、4つのサービスの廃止に成功し、テックスタックを大幅に簡素化し、コストを削減しました。この統合は、私たちのアーキテクチャを単純化するだけでなく、運用効率も向上させ、より少ないリソースでより多くの価値を提供することに集中できるようになりました。"— Simon Salmeri、データプラットフォーム責任者、Ströer

Salesforce向けLakeflow Connectを使用すると、Databricksの高度な分析とAIツールをSalesforceのCRMデータと組み合わせて、より効果的なセラー体験を構築できます：販売トレンドの予測、顧客行動への深い洞察、エンゲージメント戦略のパーソナライズ。このコネクタは、カスタムオブジェクトやフォーミュラフィールドなど、Salesforce特有の要件をサポートします。

“私たちはマーケティングセグメンテーションのユースケースのためにLakeflow Connect Salesforceコネクタを使用しています。私たちのSalesforceデータには、顧客に関する重要な情報が含まれており、このコネクタはこのデータセットを私たちのレイクハウスに持ち込むための欠けていたピースでした...今、私たちは顧客をより深く理解し、彼らの体験を改善するためのスタート地点に立っています。”— Ana-Maria Mocanu、データとインサイトリード、Flick

DatabricksとSalesforceは、2023年に戦略的パートナーシップを発表し、共同顧客のための堅牢な統合を構築しました。それ以来、私たちはゼロコピーのSalesforce Data Cloudコネクタを立ち上げ、顧客がUnity Catalogから直接Salesforce Data Cloudを発見、クエリ、ガバナンスできるようにしました。Lakeflow Connect for Salesforceと組み合わせることで、顧客はCRMデータとCDPデータの両方をDatabricks内で使用できます。

Workday用Lakeflow Connectは、シンプルでメンテナンスが少ないデータ取り込みも提供します。あなたはカスタムWorkdayレポートにアクセスして、従業員の労働力に関する集中的な分析を行うことができます。

両方のコネクタは、Data Intelligence Platformとシームレスに統合され、次のように使用できます：

• DLTを使用してデータを宣言的に変換し、データが続々と流れ込むにつれて変換を増分的に更新します
• Databricks Workflowsを使用してこれらのパイプラインをオーケストレーション
• 継続的な統合とデリバリーを管理するためのDatabricks Asset Bundles (DABs)
• ビジネス価値を向上させるための高度な分析と機械学習ツール
• Unity Catalogを使用してデータとパイプラインを管理します
• Lakehouse Monitoringを使用してデータの品質を維持します

高価値ビジネスユースケースの推進

Lakeflow Connectは、顧客行動の理解、HRデータの分析、アップセルの機会の特定など、さまざまな業界で高価値のユースケースを解放するのに役立ちます。

一般的なユースケースは、顧客の離脱を予測することです。下のビデオでは、小売業者がSalesforceの顧客注文データを取り込み、他のチャネルでの顧客とのインタラクションと組み合わせて、豊かな洞察を得る方法を示しています。

デモ：Lakeflow Connect for Salesforceを使用して顧客の離脱を予測する方法。

別のユースケースは、エグゼクティブやサポートチーム向けのカスタマーサポートダッシュボードを作成することです。このステップバイステップのブログ投稿で示されているように、ダッシュボードに表示されるトレンドを診断するためにLLMsを使用することもできます。

人事部門にとって、Workdayコネクタは、従業員の離職率などのHRトレンドを追跡し予測するのに役立ちます。例えば、関連するWorkdayのレポートを取り込み、それらをDLTで変換し、結果をAI/BIダッシュボードに組み込むことができます。

数百の顧客がLakeflow Connectを使用

顧客はすでにLakeflow Connectを使用して、さまざまなソースからデータを取り込んでいます。

世界で最も成功している自動車会社の一つであるポルシェホールディングザルツブルク（ポルシェ）は、23カ国で事業を展開するヨーロッパ最大の自動車小売会社です。ポルシェは、データ統合の課題に対処し、Salesforce Sales Cloudの顧客データへのアクセスを効率化することを望んでいました。Lakeflow Connectを使用して、PorscheはSalesforceからデータを取り込み、バッチおよびストリーミングモードで変換し、パイプラインを本番環境でデプロイおよび運用することができました。今日、Databricks Data Intelligence Platformは、Porscheグループのデータプラットフォームの中核を形成しています。PorscheがLakeflow Connectを使用して成功を収めた方法について詳しくはこちら。

「Lakeflow ConnectのSalesforceコネクタを使用することで、使いやすさと価格の面でPorscheのビジネス面での重要なギャップを埋めるのに役立ちます。顧客側では、統一されて断片化されていない顧客旅行でPorscheと顧客との絆を強化する全く新しい顧客体験を作り出すことができます。」— Lucas Salzburger、プロジェクトマネージャー、Porsche Holding

Insuletは、Omnipod製品プラットフォームを開発した医療機器会社で、Lakeflow Connectの早期の採用者でした。糖尿病やその他の病状の人々の生活を簡単にするという使命を持ち、彼らはCRMの洞察を活用して顧客のニーズをよりよく理解しようとしました。彼らはSalesforceコネクタを使用して、ETLの遅延を数日から数分に短縮し、ほぼリアルタイムの洞察により顧客の解決プロセスを改善しました。

「LakeFlow ConnectのSalesforceコネクタは特に重要で、Salesforce CRMから顧客のフィードバック、販売データ、サービスのインタラクションを直接取り込むことができました。LakeFlow Connectは、私たちがSalesforceデータを扱う方法を完全に変えました。信頼性の低いミドルウェアを排除し、今ではすべてをDatabricksで直接分析することができます - より速く、手間をかけずに。」Insulet AI・分析・高度アルゴリズム担当シニアディレクター Bill Whiteley 氏

Equiniti（EQ）は、株主、年金、修正サービスのグローバルリーダーであり、彼らの運営に関するデータと洞察を一元化することを望んでいました。Salesforce、Workday、SQL Server用のLakeflow Connectを使用して、EQは取り込みの問題をシームレスに解決し、Mosaic AIを使用して6,000社以上の企業に対する顧客体験を向上させるための重要なエンジニアリングの才能を解放しました。EQにとって、コアプラットフォームへのノーコード統合をシームレスに作成する能力は、時間と追加のコストを節約し、Gen AIアプリケーションのような価値乗数に焦点を当てることができました。EQが3つのステップで安全で統一されたデータとAIプラットフォームを構築した方法を学ぶ。

Lakeflow Connectの開始方法

データチームは、Lakeflow Connectを使用して、効率的で増分的なパイプラインをスケールで構築することができます。これには、わずかなクリックやコードの行数だけが必要です。今日からSalesforceまたはWorkdayコネクタを使用して、顧客の離脱を予測したり、パーソナライズされた顧客分析を実行したり、アップセルの機会を特定したりといった高価値のユースケースを解放しましょう。

Lakeflow Connectのロードマップには、SQL Server、Google Analytics、ServiceNow、SFTP、SharePoint、PostgreSQLなどの追加コネクタが含まれています。今年のさらなる発表をお楽しみに、または早期アクセスのプレビューに参加することに興味がある場合は、Databricksアカウントチームにお問い合わせください。

Lakeflow Connectは、コンピューティングベースの価格モデルを採用しています。サーバーレスインフラストラクチャ上でのみ実行されるSalesforceとWorkdayは、サーバーレスDLT DBTの料金が発生します。料金の詳細をご覧ください。

SalesforceとWorkday用のLakeflow Connectを始めるには、ドキュメンテーションを確認するか、このソリューションアクセラレータを試すことができます。