지구상에서 가장 포괄적인 데이터 및 AI 생태계로 거듭나기

결국 우리는 벽을 이루는 또 하나의 벽돌일 뿐입니다

Databricks에서의 첫 해를 마무리하며, ISV와 데이터 제공업체 여러분의 가장 전략적인 파트너가 되기 위해 우리가 쌓아가고 있는 벽돌들을 정리해 보면 재미있을 것 같다는 생각이 들었습니다.

지난 1년 동안 저는 수백 명의 파트너 여러분을 만나 우리가 잘하고 있는 부분, 개선해야 할 부분, 그리고 가장 전략적인 파트너가 되기 위해 우리에게 기대하는 바가 무엇인지 들었습니다. 여러분 중 대부분은 우리가 "믿고 베팅할 만한 파트너"라고 말씀해 주셨지만, 동시에 우리 벽에 더 단단한 3가지 "벽돌"이 필요하다고 하셨습니다. 바로 1) 더 나은 GTM 지원, 2) 더 구체적인 기술 가이드, 3) Marketplace에서의 거래 기능이었습니다.

지난 2월 파트너 킥오프에서 저는 처음 두 개의 벽돌을 어떻게 놓았는지 발표했습니다. 함께 비즈니스를 더 많이 성장시킬수록 더 많은 GTM 지원을 제공하는 새로운 파트너 등급 프로그램과, Databricks와의 통합을 위한 명확한 기술 가이드를 제공하는 Partner Well-Architected Framework(또는 PWAF)가 그것입니다. (David Porter와 그의 팀이 그 이후로 PWAF에 추가한 모든 유용한 기능에 대해서는 여기에서 확인하실 수 있습니다).

이번 주 DAIS에서 우리는 세 번째 벽돌을 놓습니다. 이제 Marketplace에서 고객의 사전 약정 금액(pre-committed spend)을 활용하여 거래 속도를 높일 수 있습니다.

하지만 여기서 멈추지 않았습니다. 이제 Databricks Apps 및 Genie Agents를 등록하고 공유할 수도 있습니다. 이는 "질문당 지불(pay-per-question)"과 같은 혁신적인 새로운 상업적 모델의 문을 열어줄 것이라 믿습니다(흥미롭게 들리신다면 계속 읽어주세요).

지난 2월에 제시했던 비전을 다시 한번 강조하자면, 우리는 고객이 필요로 하는 모든 도구, 모델, 데이터 세트 또는 에이전트를 제공하고, 그 과정에서 파트너 여러분의 비즈니스 성장을 돕고자 합니다.

이러한 벽돌들이 그 비전을 실현하는 발판이 될 것이라 생각하며, 여러분의 브랜드가 새겨진 "벽의 또 다른 벽돌"을 추가하는 이 여정에 저희만큼 설레시기를 바랍니다. 함께 벽돌을 하나씩 쌓아가며, 전 세계 고객에게 가장 포괄적인 데이터 및 AI 기능을 제공할 수 있습니다.

언제나 그렇듯, 우리가 함께 계속 발전해 나가기 위해 개선해야 할 점이 있다면 언제든 알려주세요 (stephen.orban@databricks.com).

하나의 벽. 수많은 벽돌.
파트너가 Databricks를 통해 빌드, 판매, 공유 및 수익화할 수 있는 더 많은 방법.

모멘텀은 또 다른 모멘텀을 낳습니다 (Databricks가 "믿고 베팅할 만한 파트너"라는 말씀의 의미)

실제로 많은 분들이 Databricks와의 파트너십이 다른 파트너십보다 빠르게 성장하고 있으며, 우리의 공동 모멘텀을 활용할 방법을 찾고 있다고 말씀해 주셨습니다.

수치로 보면, Fortune 500대 기업의 70% 이상을 포함한 20,000개 이상의 고객사가 사기 탐지, 신약 개발, 공급망 최적화, 고객 경험 개인화 등을 위해 Databricks에 의존하고 있습니다. 이러한 다양한 고객군과 사용 사례 덕분에 당사의 연간 런레이트(run rate)는 YoY 대비 65% 이상 성장하여 50억 달러를 돌파했습니다.

Marketplace 약정 차감(Commit Drawdown), 거래 기능, Apps, Genie Agents, OpenSharing까지, 정말 엄청납니다!

지난 10년 동안 많은 분들이 저와 함께 AWS나 Google Cloud의 Marketplace에서 협업하셨기 때문에, 지난 1년 동안 나눈 대화 중 상당수가 Marketplace에 편중되었을 수 있습니다. 하지만 당사 고객에게 도달할 수 있는 새로운 방법, 당사의 약정 백로그(committed backlog) 활용 방법, 그리고 여러분의 솔루션을 유치하기 위한 당사 영업 팀의 인센티브를 요구하신 목소리가 얼마나 많았는지 간과할 수 없습니다.

이에 더 지체하지 않고, 특히 자체 데이터를 보유한 파트너분들을 위해 상업적 혁신을 주도할 수 있는 다양한 새로운 Marketplace 기능 및 새로운 공유/전송 모델을 발표하게 되어 기쁩니다.

신규! Marketplace 약정 차감(Commit Drawdown) 파일럿

이번 주부터 Universal Commit(범용 약정)을 보유한 고객은 Databricks Marketplace에서 대상 파트너 솔루션에 대한 인보이스를 제출할 수 있습니다. 해당 거래가 Databricks에서 실행되거나 Databricks로 데이터를 공유하는지 확인되면, 고객의 약정 의무 금액을 그에 따라 차감하고 파트너의 영업을 지원한 당사 영업 팀에 보상을 제공할 예정입니다.

고객은 Databricks에서 필요한 솔루션을 얻고, 파트너는 사전 약정된 예산을 활용하여 거래를 가속화할 수 있으며, 당사 영업 담당자들은 적극적으로 지원할 동기를 얻게 됩니다. 모두가 윈윈(win-win)하는 셈입니다.

올해 말에는 거래 기능(transactability)을 출시하여, 고객이 선불 금액 및/또는 당사의 결제 시스템을 사용해 대상 파트너 솔루션을 구매할 수 있도록 할 예정입니다. 당사는 거래 비용을 충당하기 위한 소정의(업계 표준) 수수료를 제외한 금액을 파트너에게 송금해 드립니다.

대상이 되려면 솔루션이 Databricks에서 실행되거나 Databricks로 데이터를 공유해야 하며, 대상 솔루션을 보유한 파트너로는 AccuWeather, Acxiom, Anomalo, Anvilogic, Arctic Wolf, AtScale, Cognition, Datavant, Definitive Healthcare, Domo, Dun & Bradstreet, Engine, Epsilon, FactSet, Fivetran, Health Catalyst, Intent, Komodo, Kythera, LakeFusion, Monte Carlo, mParticle, Omni Analytics, OneTrust, Qlik, Replit, Sigma Computing, ThoughtSpot, TrendAI, ZoomInfo 등이 있습니다.

많은 고객들이 Databricks의 광범위한 영역에 걸쳐 우리가 얼마나 잘 통합되어 있는지 보고 Sigma를 선택합니다. 300개 이상의 고객사가 업계 최고 수준의 AI 및 분석을 위해 Databricks 환경에서 Sigma를 선택하고 있습니다. Databricks Marketplace에서 판매 주기를 단축할 수 있게 된 것은 우리 관계의 자연스러운 확장이며, Databricks가 서비스를 구체화하고 성장시키는 데 기여하게 되어 기쁩니다.— Mike Palmer, CEO, Sigma Computing

신규! Marketplace에서 Databricks Apps 배포하기

우리는 2024년 11월에 Databricks Apps를 출시했으며, 이는 거의 모든 지표에서 가장 빠르게 성장하는 제품 라인 중 하나가 되었습니다. 지난해 서밋 이후 5배 성장을 기록했으며, 매주 5,000개 이상의 계정에서 프로덕션 환경의 Apps를 실행하고 있습니다. 상위 100개 Apps 고객사는 평균 250개 이상의 프로덕션 Apps를 배포했으며, 사용 사례는 맞춤형 분석 대시보드, 운영 포털, 작업 워크플로 관리자, AI 채팅 인터페이스, 데이터 태깅 워크플로, 맞춤형 모델 인터페이스 등 다양합니다.

또한, Apps 도입의 상당 부분은 현업 부서(LOB) 사용자들로부터 이루어지고 있으며, 데이터 팀과 앱 빌더들이 이러한 앱을 공유하여 모두를 위한 데이터 및 AI 민주화를 실현하고 있습니다.

고객들은 기업 전체에서 이러한 Apps를 공유하는 것을 선호하지만, 지금까지는 이 Apps를 자신의 고객과 공유할 수 없었습니다... 하지만 이제는 가능합니다.

이번 주부터 Apps를 제작하여 Marketplace에 등록하고, 전 세계 20,000여 고객에게 도달할 수 있습니다. 고객은 Marketplace에서 이러한 Apps를 검색하고, 자체 Workspace에 배포한 다음, 자체 데이터뿐만 아니라 파트너가 App에 포함했거나 OpenShared를 통해 공유한 데이터에 대한 액세스 권한을 부여할 수 있습니다. 이 모든 과정에서 파트너의 코드와 핵심 IP는 고객에게 노출되지 않고 안전하게 보호됩니다.

출시 파트너로는 Acxiom, Bright Data, Capital One, Datavant, Meta, Slalom, Stagwell, The Trade Desk를 비롯하여 금융 서비스, 헬스케어, 광고, 마케팅, 분석 분야의 20여 개 이상의 기업이 참여하고 있습니다.

Datavant의 토큰화 기술을 네이티브 Databricks App으로 배포함으로써 데이터 이동의 필요성이 사라졌습니다. Databricks 상에서 직접 빌드함으로써, 고객은 데이터가 이미 존재하는 위치에서 쉽고 직관적인 방식으로 의료 기록을 안전하게 토큰화할 수 있습니다. 신뢰할 수 있는 당사의 토큰화 기술과 Unity Catalog의 거버넌스를 결합함으로써, 기업은 몇 달이 아닌 몇 분 만에 임상적 가치를 안전하게 실현할 수 있습니다.— Sara Livengood, SVP Product Management, Datavant Life Sciences

신규! 에이전트 시대(agentic era)를 위한 업계 최초의 오픈 공유 프로토콜, OpenSharing

많은 분들이 세계 최초이자 가장 널리 채택된 완전한 오픈 데이터 공유 프로토콜인 Delta Sharing에 대해 잘 알고 계실 것입니다. Adobe, Atlassian, Aveva, Circana, FactSet, LSEG, Stripe, The Trade Desk, Walmart 등 수백 개의 파트너사가 이를 사용하여 고객에게 데이터를 제공하고 있으며, 이는 다른 공유 플랫폼이 제공하는 폐쇄적인 환경(walled gardens)에 종속되는 것을 원치 않기 때문이기도 합니다.

Delta Sharing은 정형 데이터에 대한 오픈 공유를 개척한 이후 노트북, Iceberg 지원, 모든 엔드포인트(Snowflake 포함)로의 공유 등으로 확장되어 왔지만, 에이전트가 다자간 협업 및 수익화에 참여하기 위해서는 새로운 접근 방식이 필요하다고 생각합니다.

이에 따라 지난주, 우리는 AI 시대를 위해 설계된 업계 최초의 오픈 소스이자 벤더 독립적인 공유 프로토콜인 OpenSharing을 발표했습니다.

OpenSharing은 Delta 또는 Iceberg 형식의 정형 데이터 뿐만 아니라 비정형 데이터, 볼륨, 에이전트 기술, AI 모델, 시맨틱 등의 안전한 교차 클라우드 및 교차 플랫폼 공유를 지원합니다. 이러한 새로운 유형의 공유 외에도, 네트워크 구성을 간소화하는 교차 클라우드 스토리지용 SecureConnect와 이그레스(egress) 수수료를 줄이기 위해 교차 리전 복제를 사전에 생성/캐싱하는 Global Distribution을 포함하여 Databricks의 관리형 OpenSharing 버전에 대한 개선 사항도 출시했습니다.

OpenSharing은 자사의 LSEG Everywhere 전략과 부합하며, 고객이 어떤 클라우드, 도구, AI 모델을 사용하든 상관없이 그들이 일하는 곳 어디에서나 신뢰할 수 있는 AI 지원(AI-ready) 금융 데이터와 AI 자산을 제공할 수 있도록 지원합니다. 전 세계의 공동 고객에게 서비스를 제공하기 위해 Databricks가 이 제품을 구성하는 데 기여하게 되어 기쁩니다.— Ron Lefferts, LSEG Data & Analytics 부문 CEO

새로운 기능! OpenSharing이 온프레미스 스토리지 에코시스템을 엽니다

대부분의 기업이 클라우드로 마이그레이션하고 있지만, 전 세계 데이터의 대부분은 여전히 온프레미스 데이터 센터에 보관되어 있습니다. 데이터 주권 요구 사항을 충족하기 위해서든, 에지에서 낮은 지연 시간을 유지하기 위해서든, 전송 비용을 피하기 위해서든, 대규모 온프레미스 스토리지를 보유한 고객들은 지금까지 현대적인 클라우드 기반 분석 및 AI 기능을 활용할 수 없었습니다... 오늘 전까지는 말이죠.

지난주 저희는 Cohesity, Commvault, Everpure, HPE, MinIO, NetApp, Nutanix, Qumulo, Rubrik, VAST Data를 포함한 세계적인 스토리지 벤더들이 OpenSharing을 도입했거나 곧 도입할 예정인 Open Lakehouse Storage Ecosystem을 발표했습니다. 이를 통해 고객은 온프레미스에 저장된 엑사바이트 규모의 데이터를 복사 없이(zero-copy) 빠르고 쉽게 Databricks와 공유할 수 있게 됩니다.

이 에코시스템을 통해 고객은 데이터를 이동하거나 복사할 필요 없이 클라우드와 온프레미스 스토리지 전체에서 동일한 Databricks 기능을 사용할 수 있습니다. 굳이 하나만 선택할 이유가 없으니까요.

VAST는 AI 시대가 요구하는 성능, 확장성, 접근성을 제공하기 위해 설립되었습니다. OpenSharing을 통한 Databricks와의 협력은 이러한 비전을 실현합니다. 조직이 온프레미스에서 수년에 걸쳐 구축한 대규모 데이터 자산을 AI에 즉시 활용하기 위해 클라우드로 이동할 필요가 없습니다. 이를 통해 양사 공동 고객은 데이터가 있는 그 자리에서 복사 없이 고대역폭으로 데이터를 활성화할 수 있는 경로를 확보하게 됩니다.— Jeff Denworth, VAST Data 공동 창립자

새로운 기능! OpenSharing Genie Agents로 데이터의 가치를 극대화하세요!

Genie Agents는 고객이 Databricks에서 비즈니스 컨텍스트를 기반으로 자연어 채팅 인터페이스를 구축할 수 있도록 지원하는 마법 같은 최신 기능 중 하나입니다. 예를 들어, 저는 매일 Genie Agents를 사용하여 "어떤 파트너가 가장 큰 영향력을 미치고 있는가?", "고객이 한 파트너에서 다른 파트너로 이탈하고 있는가?", "어떤 파트너가 비정상적인 성장을 이끌고 있는가?"와 같은 질문에 단 몇 초 만에 답을 얻습니다. 이전에는 분석가가 답을 구하는 데 며칠 또는 몇 주가 걸렸고 후속 질문에는 더 오랜 시간이 걸렸던 질문들을 이제 손끝에서 바로 해결할 수 있습니다.

이번 주부터 OpenSharing을 통해 고객과 Genie Agents를 공유함으로써 자체 계정을 넘어 이 마법 같은 기능을 전파할 수 있으며, 곧 자사 Marketplace에 등록하여 2만 명 이상의 고객이 이를 발견하고 사용할 수 있도록 지원할 예정입니다.

파트너는 이제 단순히 데이터만 공유하지 않습니다.
데이터를 기반으로 한 AI 경험을 공유할 수 있습니다.

OpenSharing을 통해 공유할 때 질문할 수 있는 질문 수 및/또는 액세스할 수 있는 행 수를 제어할 수 있으며, 고객은 학습해야 할 스키마나 빌드해야 할 UI가 없고 원본 테이블에 액세스할 필요도 없습니다(허용하는 경우는 제외).

OpenSharing을 통해 Kythera Labs의 Genie Spaces를 제공함으로써, 의료 서비스 제공업체와 생명 과학 조직이 복잡한 헬스케어 데이터로부터 더 빠르고 확실하게 답을 얻을 수 있도록 돕고 있습니다. 진짜 기회는 단순히 데이터에 더 쉽게 접근하는 데 있는 것이 아닙니다. 질문과 의사 결정 사이의 거리를 좁히는 데 있습니다. 팀은 헬스케어 데이터에 요구되는 거버넌스, 보안 및 통제를 유지하면서 Databricks 내에서 자연어를 사용하여 환자의 여정을 탐색할 수 있습니다.— Jeff McDonald, Kythera Labs CEO

새로운 상업적 모델을 함께 만들어 갑니다

저는 커리어 내내 데이터 라이선싱 분야에 몸담아 왔습니다(Bloomberg에서 11년, Dow Jones에서 3년 근무 후 AWS와 Google에서 10년 이상 근무). 아직 확실히 말하기는 이르지만, 이러한 기능들의 결합이 영업 주기 단축, 고객 획득 비용 절감, 그리고 우리가 아직 상상조차 하지 못한 새로운 상업적 모델을 개척할 잠재력을 가지고 있다고 생각합니다.

예를 들어, 데이터 라이선싱에서 가장 큰 과제 중 하나는 데이터 제공업체와 잠재 고객 간의 사전 판매(pre-sales) "교착 상태"입니다.

고객은 평가 중인 데이터 세트에 포함된 모든 내용을 파악하여 자체 데이터와의 관련성을 비교해 보고 싶어 하지만, 데이터 제공업체는 보상이 보장되기 전까지는 액세스 권한을 부여하고 싶어 하지 않습니다. "이 데이터 세트가 내 포트폴리오의 증권을 포함하고 있는가?", "내 타겟 고객이 귀사의 오디언스에 포함되어 있는가?"와 같은 질문은 전체 데이터 세트에 액세스하지 않고는 답하기가 매우 어렵기 때문에, 일부만 포함되거나 오래된 데이터 세트로 구성된 샘플을 주고받는 과정이 길어져 영업 주기가 늘어나고 양측 모두가 답답해하는 경우가 많습니다.

이때 등장한 것이 바로 “질문당 지불(pay-per-question)” 방식입니다.

OpenSharing과 Marketplace는 무한해 보이는 기술적 및 상업적 가능성의 문을 열어줍니다. 이제 데이터 제공업체는 데이터 세트, 노트북, Genie Agents, 앱의 모든 조합을 공유할 수 있으며, Marketplace에 거래 기능이 추가됨에 따라 "질문당 지불" 및/또는 데이터 제공업체와 고객의 데이터를 원활하게 혼합할 수 있는 고도로 타겟팅된 애플리케이션이나 자연어 인터페이스를 통해 상업적 혁신을 이룰 수 있게 됩니다. 이 모든 것은 Databricks에 기대하시는 강력한 거버넌스를 바탕으로 지원됩니다.

AI가 대부분의 분야를 계속해서 혁신하고 있는 가운데, 모델이 아직 학습하지 않은 독점 데이터 세트를 보유하고 있는 지금이 그 어느 때보다 좋은 기회라고 생각하며, 데이터 라이선싱의 미래를 함께 재정의하게 되어 기쁩니다.

저희는 에이전틱 AI(agentic AI)가 조직이 데이터에 액세스하고 적용하는 방식을 근본적으로 바꿀 엄청난 기회라고 생각합니다. Databricks와의 협업은 보다 유연하고 확장 가능한 소비 모델에 대한 약속을 반영하며, 고객이 실시간으로 데이터를 더 쉽게 탐색하고 평가하는 동시에 혁신을 가속화할 수 있도록 지원합니다. 이와 동시에, 저희는 독점 자산에 대해 최고 수준의 거버넌스 및 보호 표준을 유지하고 있습니다.— Pat Dodd, Cotality CEO

한 장 한 장 벽돌을 쌓듯, 함께 미래를 만들어 갑시다

여러분의 의견을 경청했습니다. 더 나은 GTM 지원, 기술 가이드, Marketplace를 통한 거래 주기 단축을 원하셨죠. 지난 한 해 동안 저희는 투명한 혜택과 의무(gives/gets)를 제공하는 새로운 파트너 프로그램, AI 지원 Partner Well-Architected Framework, 그리고 더 빠른 거래 성사 및 상업적 혁신을 돕는 다양한 새로운 Marketplace 기능을 출시했습니다.

하지만 이제 시작에 불과합니다. 저희와 함께 구축하고, 도전하며, 한 장 한 장 벽돌을 쌓아 미래를 향한 장벽을 더 튼튼하게 만들어 주셔서 감사합니다.

계속해서 멋진 성과를 만들어 가시길 바랍니다.
— Stephen

(이 글은 AI의 도움을 받아 번역되었습니다. 원문이 궁금하시다면 여기를 클릭해 주세요)