Welcome Rubicon to Databricks: これからのAIストレージとサービングシステムにむけて

Original: Welcome Rubicon to Databricks: The Future of AI Storage and Serving Systems

翻訳: saki.kitaoka

RubiconのチームがDatabricksに参加することを発表でき、大変嬉しく思っています。大規模インフラ構築者であるAkhil GuptaとSergei Tsarevによって設立されたRubiconは、AIのためのストレージシステムの構築に取り組むスタートアップです。

私たちは10年以上前に、データとAIアプリケーションの構築を劇的に容易にすることを目標に、Databricksを会社としてスタートしました。私たちはすぐに、AIアプリケーションに必要なデータを処理するには、企業のデータウェアハウスなどの従来のストレージシステムでは不十分であることに気づきました。そこで、データウェアハウスとデータレイクストレージの長所を組み合わせたレイクハウスのコアストレージ基盤であるDelta Lakeを構築しました。

LLMのような最近のAIのイノベーションでは、多様なタイプのデータを処理し、オンラインスタック（サービス用）とオフラインスタック（トレーニングや実験用）の両方をシームレスに統合できるストレージソリューションがさらに必要とされています。このことは、これらの新しいエキサイティングなテクノロジーを活用できる、シンプルで使いやすいプラットフォームを求めるお客様との会話にも反映されています。

AkhilとSergeiは、ストレージインフラ分野でよく知られた2人の人物です。Akhilは約20年前にGoogleでキャリアをスタートし、広告インフラを担当しました。このインフラは、地球上で現在までに行われたAIの最大規模の使用例の1つです。セルゲイは、高価値でトランザクションの多いアプリケーションに対応した最初のスケールアウトOLTPデータベースシステムの1つであるClustrixの共同設立者です。2人はDropboxで出会い、何兆ものファイルやエクサバイトのデータを扱う世界最大級、最も効率的で安全なストレージシステムの構築に貢献しました。これには、膨大な量の非構造化データ（文書、画像、動画など）の処理も含まれており、まさに顧客がAIアプリケーションに依存するタイプのデータでした。AkhilとSergeiは、過去の経験から、AIが持つ膨大な可能性と、そのようなワークロードをサポートするために必要なストレージやサービスインフラにギャップがあると考えたのは当然のことです。その結果、この問題を解決することに焦点を当てた会社を設立することになったのです。

"私たちは、AI時代の次世代ストレージインフラを実現することを目標にRubicon.ioを立ち上げました。スケールの大きな世界最高水準のパフォーマンスで素晴らしい開発者体験を提供することが、私たちのミッションの核心です。私たちのビジョンはDatabricksと完全に一致しており、私たちのチームがDatabricksに加わり、Lakehouseで開発者に並外れた体験を提供できることに感激しています。" - Rubicon.ioの共同創業者Akhil Gupta氏とSergei Tsarev氏

AkhilとSergeiに初めて会ったとき、私たちはすぐに共通の展望と、彼らが開発してきた技術が私たちのAIインフラの仕事を加速させる可能性に気づきました。

チームRubiconの先駆的なビジョンをDatabricks Lakehouse Platformに取り込むことができ、とても嬉しく思っています。今後開催されるData + AI Summitでは、AIアプリケーションの構築を劇的に簡素化するために、Rubiconの技術的アプローチをどのように統合していくかを発表する予定です。参加登録はこちらからまだ可能です。