Databricks로 AI 개발 가속화: MCP와 Agent Bricks를 통한 검색, 거버넌스 및 구축

데이터 인텔리전스는 기업의 운영 방식을 혁신하고 있으며, 이를 통해 조직은 방대한 양의 독점 데이터를 기반으로 추론하는 AI 에이전트 를 구축할 수 있습니다. 이 발전의 핵심 요소는 AI 에이전트가 외부 서비스 및 타사 데이터 자산에 연결하여 실제 세계에서 작업을 수행하는 능력입니다. 바로 이 지점에서 모델 컨텍스트 프로토콜(MCP) 이 빛을 발하며, LLM이 외부 도구에 액세스하는 표준화된 방식 역할을 합니다.

하지만 MCP를 대규모로 활용하는 데에는 세 가지 주요 엔터프라이즈 과제가 있습니다.

1. 검색 및 액세스: 팀이 점점 확장되는 MCP 서버 생태계를 쉽게 찾고 연결하려면 어떻게 해야 할까요?
2. 거버넌스 및 보안: 조직에서 승인된 사용자와 에이전트만 특정 서버에 액세스할 수 있도록 강력한 엔터프라이즈급 거버넌스를 적용하려면 어떻게 해야 할까요?
3. 실행 가능성: 기업이 이러한 거버넌스가 적용된 외부 서비스를 AI 에이전트 워크플로에 통합하여 인사이트를 생성하고 안전하게 조치를 취하려면 어떻게 해야 할까요?

이제 Databricks는 Agent Bricks 내에서 안전하고 통합되었으며 확장 가능한 MCP 환경을 통해 이러한 문제를 해결합니다. 바로 검색 및 거버넌스를 위한 MCP Catalog (베타), 계속 성장하는 외부 도구 에코시스템에 액세스하기 위한 Databricks Marketplace의 MCP (퍼블릭 프리뷰), 에이전트 오케스트레이션을 지원하는 Multi-Agent Supervisor (베타)와의 통합 입니다.

Databricks의 Week of Agents의 일환인 이번 출시는 데이터를 기반으로 정확하게 추론하는 AI에 대한 저희의 비전을 발전시킵니다. Agent Bricks는 lakehouse 전반에 걸쳐 거버넌스, 검색 및 실시간 작업을 통합함으로써 비즈니스 컨텍스트를 이해하고 이를 기반으로 안전하게 작동하는, 거버넌스가 적용된 프로덕션용 에이전트를 그 어느 때보다 쉽게 구축할 수 있도록 지원합니다.

MCP Catalog로 도구 및 에이전트 검색 및 거버넌스

조직 내 모든 MCP 서버를 검색, 연결, 관리 할 수 있는 원스톱 샵으로 Agents 내에 새로운 'MCP Servers' tab을 도입합니다. Unity Catalog에 기본적으로 빌드되어, 기업이 이미 데이터 및 AI 자산에 대해 신뢰하고 있는 업계 최고의 보안, 거버넌스 및 액세스 제어 기능을 동일하게 제공합니다.

이 통합 카탈로그를 통해 팀은 다음을 수행할 수 있습니다.

• 도구와 에이전트를 위한 MCP 서버를 검색 하여 기업 전체에서 사용할 수 있습니다.
• Unity Catalog를 통한 액세스 거버넌스: 사용자가 승인된 서버에만 연결하도록 보장합니다.
• 보안 간소화 기본 내장 토큰 교환 및 엔드투엔드 인증으로 보안을 간소화하세요.
• 감사 : 데이터와 모델뿐만 아니라 이를 사용하는 지능형 시스템을 포함하여 조직에서 일어나는 일을 감사합니다.

이를 통해 다른 팀의 작업을 찾기 어렵다는 이유만으로 중복된 도구나 에이전트를 빌드하는 일이 없어지므로, 중복 작업을 줄여 팀의 소중한 시간을 절약할 수 있습니다. 또한 기업이 보안 위험을 최소화하고 중앙 집중식 팀이 조직 전체에서 공통 MCP 서버를 개발하고 공유할 수 있도록 지원합니다.

새 tab에서는 현재 사용 가능한 관리형 서버에 대한 가시성도 제공합니다. 여기에는 사용자 지정 Python 또는 SQL 실행을 위한 UC Functions, 비정형 데이터 검색을 위한 Vector Search, 대화형 데이터 액세스를 위한 Genie, 그리고 Unity Catalog 테이블에 대해 직접 SQL query를 실행하기 위한 DBSQL(신규!) 이 포함됩니다.

Online특징점(퍼블릭 프리뷰)를 지원하여  이 에코시스템을 확장하고 있습니다. Lakebase 플랫폼에 빌드된 이 기능은 높은 QPS의 에이전트 워크로드를 위해 설계된 REST endpoint를 통해 대규모 환경에서 25ms 미만의 특징점 조회를 제공합니다. 이 통합을 통해 에이전트는 거버넌스가 적용된 실시간 특징점을 외부 작업과 결합하여 즉각적이고 가치 있는 실행에 필요한 도메인별 정확도를 제공할 수 있습니다.

Databricks Marketplace의 MCP 서버로 에코시스템 확장

검색이 내부 카탈로그에 이미 있는 서버에만 국한되어서는 안 됩니다. 점점 더 많은 에이전트가 외부 서비스를 활용하여 회사 기술 자료에서 고객 360 요약을 요청하거나 신뢰할 수 있는 공급자로부터 실시간 정형 비즈니스 데이터를 검색하는 등 실제 작업을 수행하고 있습니다. 

Databricks Marketplace에 MCP가추가  되면서 차세대 AI 에이전트를 구동할 수 있는 새로운 외부 MCP 서버를 검색, 평가, 연결할 수 있는 중앙 허브가 마련되었습니다. 

Databricks Marketplace 는 AI 지원 데이터세트, 노트북, 솔루션을 찾고 배포하기 위한 신뢰할 수 있는 허브입니다. MCP 서버가 추가됨에 따라 데이터 및 AI 팀은 이제 클릭 한 번으로 외부 도구 연결을 검색하고 구성할 수 있습니다. 파트너의 경우 마켓플레이스에 MCP 서버를 게시하면 Agent Bricks를 서비스에 원활하게 연결할 수 있는 수천 명의 Databricks 고객에게 즉시 도달할 수 있습니다.

또한 마켓플레이스는 새로운 도구가 에코시스템에 추가될 때 AI 에이전트가 이를 즉시 채택할 수 있도록 하여 고객이 항상 최신 상태를 유지하도록 지원합니다. 실시간 금융 데이터로 에이전트를 강화하거나, 외부 에이전트와 협력하거나, 엔터프라이즈 시스템 전반에서 작업을 수행하는 등 어떤 경우에도 Databricks Marketplace의 MCP 서버 카탈로그를 사용하면 에코시스템을 간단하게 확장할 수 있습니다.

출시 파트너로는 You.com, Glean, S&P Global, Factset, Dun & Bradstreet, Moody’s 등이 있으며, 이들을 통해 에이전트는 고품질의 AI 지원 데이터 및 도구에 즉시 액세스할 수 있습니다.

"고객에게는 인사이트를 실행으로 연결하는 더 빠르고 지능적인 방법이 필요합니다. Databricks Marketplace에서 두 개의 MCP 서버를 출시하여 Databricks와의 협업을 확대하고 고객에게 신뢰할 수 있는 다양한 S&P Global 데이터에 대한 액세스를 제공하게 되어 기쁘게 생각합니다. "이러한 통합을 통해 고객은 이제 신뢰할 수 있는 당사의 금융 및 원자재 인텔리전스를 자체 데이터 및 AI 워크플로와 연결하여 실시간 인사이트를 확보하고 분석을 가속하며 산업 전반의 의사 결정 방식을 혁신할 수 있습니다." — Bhavesh Dayalji, S&P Global 최고 AI 책임자(Chief AI Officer) 겸 Kensho CEO

"100년이 넘는 기간 동안 Moody’s의 데이터는 글로벌 시장 전반의 중요한 의사 결정을 지원해 왔습니다. 이제 Databricks Marketplace를 통해 6억 개 이상의 회사 기록, 신용 등급, 독점 연구에 걸친 신뢰할 수 있는 동일한 데이터를 Moody’s MCP 서버에 액세스하여 Agent Bricks 내에서 사용할 수 있습니다. "고객이 혁신을 이루는 현장에서 바로 사용할 수 있고 GenAI 솔루션에 최적화된 Moody’s의 데이터, 인사이트, 분석에 직접 액세스하여 비즈니스 개발, 규정 준수, 신용 분석, 조기 경보 모니터링 워크플로를 혁신할 수 있도록 지원하게 되어 매우 기쁩니다." — Cristina Pieretti, Moody's 디지털 콘텐츠 및 혁신 책임자

"이제 Databricks Marketplace에서 MCP 서버를 사용할 수 있으므로 조직은 Dun & Bradstreet의 신뢰할 수 있는 비즈니스 컨텍스트를 Agent Bricks에 직접 통합할 수 있습니다. D-U-N-S® Number를 기반으로 하는 이 통합은 환각(hallucination)을 줄이고 의사 결정 정확도를 높이며 에이전트 시스템의 배포를 가속화합니다." — Anna Krayn, Dun & Bradstreet 파트너십 및 제휴 부문 GM

"FactSet의 AI 지원 데이터는 저희 고객의 수요가 매우 높습니다. Databricks Marketplace에 저희 MCP 서버를 출시하게 되어 기쁩니다. Agentbricks, Databricks One, 그리고 이제 Databricks Marketplace의 MCP를 포함하여 Databricks를 통해 제공되는 광범위한 AI 기능 전반의 협업을 통해, FactSet의 고객 데이터 권한을 기존 워크플로에 통합하여 인사이트와 효율성을 모두 높일 수 있습니다. "Databricks를 통해 제공되는 도구는 당사의 개방적이고 유연한 접근 방식과 결합되어, 고객의 AI 워크로드에 데이터를 통합하고 데이터 강화함으로써 신속한 혁신을 지원합니다." — 패트릭 스탈링(Patrick Starling), Factset 데이터 솔루션 부문 수석 부사장

Agent Bricks Multi-Agent Supervisor를 활용하여 MCP로 조치 수행

Agent Bricks의 Multi-Agent Supervisor(MAS)는 여러 에이전트를 조정하여 엔터프라이즈 데이터에서 심층적인 인사이트를 생성합니다. 이제 MCP 통합을 통해 이러한 에이전트는 카탈로그 또는 마켓플레이스 전반의 타사 AI 지원 데이터에 액세스하거나 외부 시스템에서 작업을 trigger할 수 있습니다. 그 결과, 에이전트는 원활하고 거버넌스가 적용된 환경에서 정보를 검색할 뿐만 아니라 분석 실행, 티켓 제출, 중요한 결과 생성 등 정보에 따라 조치를 취할 수 있습니다.

“Agent Bricks Multi-Agent Supervisor를 통해 저희 마케팅 리더들은 모든 캠페인에서 더 풍부한 인사이트를 얻고 있습니다. Genie의 데이터와 Knowledge Assistant의 컨텍스트를 결합하여 ROAS와 같은 결과를 설명하고 더 스마트한 의사 결정을 유도합니다.”— 브루노 로차(Bruno Rocha), Sociedade De Ensino Superior Estácio(YDUQS) 디지털 기술 이사

완벽한 엔드투엔드 경험: 검색에서 실행까지

강력하고 거버넌스가 적용된 에이전트를 start할 준비가 되셨나요? 새로운 MCP 기능은 지금 Databricks 계정에서 사용할 수 있습니다.

• 11월 11일에  Sam Altman 및 Ali Ghodsi와 함께하는'AI의 미래: 제대로 작동하는 에이전트 구축' 에 참여하세요.
• 데모 동영상을 시청하세요.
• 검색 및 거버넌스: MCP 서버 tab을 활용하여 조직에서 사용할 수 있는 MCP 서버 를 탐색하고 관리하세요.
• Agent Bricks Multi-Agent Supervisor 및 MCP로 빌드: Agent Bricks의 Multi-Agent Supervisor를 통해 거버넌스가 적용된 MCP 서버에 연결하여 에이전트에 외부 작업을 통합하기 Start.
• Week of Agents 에서 발표된 다른 공지 사항에 대해 알아보세요.

(이 글은 AI의 도움을 받아 번역되었습니다. 원문이 궁금하시다면 여기를 클릭해 주세요)