Unity Catalog Pages: Genie Ontology에서 비즈니스 지식을 관리하는 거버넌스 공간

모든 AI 에이전트는 그 기반이 되는 컨텍스트만큼만 유용할 수 있습니다. 에이전트에게 매출, 활성 고객 또는 이탈에 대해 질문할 때, 답변의 품질은 에이전트가 귀사의 비즈니스 내에서 이러한 단어가 의미하는 바를 이해하고 있는지 여부에 전적으로 달려 있습니다.

많은 조직에서 이러한 의미는 한 곳에 모여 있지 않습니다. Slack 스레드, Confluence 페이지, 스프레드시트, 그리고 소수 인원의 머릿속에만 있는 암묵적 지식에 흩어져 있으며, 동일한 용어가 세 개의 서로 다른 팀에 의해 세 가지 다른 방식으로 정의되는 경우가 많습니다. 따라서 에이전트가 모호한 개념을 만나면 LLM이 가장 잘하는 일을 합니다. 즉, 틀렸을 때조차도 자신 있게 추측하는 것입니다. 이러한 격차는 기업이 실제 비즈니스 질문을 AI에 안심하고 맡기지 못하게 만드는 가장 큰 장벽 중 하나입니다.

이것이 바로 Genie Ontology가 해결하기 위해 개발된 문제입니다. Genie Ontology는 모든 AI를 위한 Databricks의 엔터프라이즈 컨텍스트 레이어입니다. 대시보드, 쿼리, 테이블, 파이프라인 및 연결된 앱에서 지식을 추출하여 비즈니스가 작동하는 방식을 자동으로 학습하고, 이를 활성 그래프(living graph)로 구성하여 Genie 및 기타 에이전트에게 어디를 찾아보고 무엇을 신뢰해야 하는지 알려줍니다.

이러한 자동 이해만으로도 엄청나게 많은 영역을 커버할 수 있습니다. 하지만 일부 개념은 추론에만 맡겨두기에는 너무나 중요합니다. "완료된 여정" 또는 "활성 고객"을 정확하게 정의해야 할 때, 모든 사람과 모든 에이전트가 신뢰할 수 있는 단 한 곳에서 내부 전문가가 이를 직접 정의하도록 하고 싶을 것입니다. Unity Catalog Pages가 바로 이 격차를 메워줍니다. 사람이 직접 큐레이션하는 Genie Ontology의 레이어이자 Unity Catalog 시맨틱의 최신 기능인 Pages는 데이터 스튜어드가 Genie Code의 도움을 받아 개념의 신뢰할 수 있는 의미를 정의할 수 있는 거버넌스 공간을 제공하며, Genie는 이 정의를 단일 진실 공급원(source of truth)으로 취급합니다.

Unity Catalog Pages가 Genie Ontology를 강화하는 방법

Genie Ontology는 두 가지 종류의 컨텍스트를 하나로 결합합니다. 자동으로 학습하는 모든 내용과 더불어, 팀이 Unity Catalog 시맨틱에서 명시적으로 모델링한 정의를 활용합니다. 모델링된 각 요소는 다음과 같이 고유한 역할을 수행합니다.

• 메트릭 뷰(Metric views)는 거버넌스가 적용된 측정 지표와 KPI를 재사용 가능한 계산식으로 정의하므로, "분기별 예약"과 같은 수치가 항상 합의된 단일 방식으로 계산됩니다.
• 도메인 및 서브도메인(Domains and sub-domains)은 비즈니스 영역별로 데이터와 지식의 범위를 지정하므로, 에이전트가 전체 카탈로그를 검색하는 대신 해당 비즈니스 부서의 고품질 자산에 바로 도달할 수 있도록 합니다.
• 인증 및 사용 중단(Certification and deprecation)은 어떤 자산이 신뢰할 수 있고 어떤 자산이 더 이상 사용되지 않는지 표시하여 에이전트가 무엇을 신뢰해야 하는지 알 수 있도록 합니다.
• Pages는 이제 수치와 자산 뒤에 숨겨진 용어, 엔티티, 약어 등 비즈니스 개념의 의미를 캡처합니다.

이들은 서로 보완적인 관계이며 대체할 수 없습니다. 메트릭 뷰는 에이전트에게 계산하는 방법을 알려주고, Pages는 개념이 의미하는 바를 알려주며, 도메인은 어디를 찾아야 하는지를, 인증은 무엇을 신뢰해야 하는지를 알려줍니다. Genie가 스스로 학습하는 지식과 결합하여 비즈니스에 대한 단일화되고 거버넌스가 적용된 그림을 형성합니다.

이제 Genie One에 대한 질문이 조직에서 명시적으로 정의한 개념과 관련이 있는 경우, Genie는 추론에만 의존하는 대신 해당하는 Page를 검색하고 그 정의를 사용하여 요청을 해석하는 데 도움을 줄 수 있습니다. 예를 들어, 영업 조직에서 "활성 고객"의 기준과 해당 엔티티를 도출할 테이블을 문서화해 두었다면, 분석가가 주요 영업 프로모션 기간 동안의 30일 고객 트렌드를 분석해 달라고 요청할 때 Genie One은 이 정확한 정의를 사용하여 추측 없이 정확한 결과를 제공할 수 있습니다.

사용자 경험을 하나로 연결하기 위해, 답변의 근거로 사용된 Unity Catalog Pages는 클릭 가능한 출처로 인용되므로 사용자는 정의를 검사하고, 소유자가 누구인지 확인하며, 해당 컨텍스트가 사용된 이유를 이해할 수 있습니다. 이를 통해 그라운딩(grounding)은 숨겨진 AI의 결정이 아니라 사용자가 결과를 바탕으로 조치를 취하기 전에 검토할 수 있는 검증 가능한 사고 과정으로 전환됩니다.

모든 지식을 위한 단일 진실 공급원(Single source of truth) 

각 Page는 구조화된 필드(소유자, 동의어, 설명)와 함께 링크, 이미지, 테이블, 그리고 해당 개념이 의존하는 Unity Catalog 및 워크스페이스 오브젝트에 대한 인라인 참조를 담을 수 있는 풍부한 본문을 결합합니다. Pages는 데이터 자산을 구성하는 데 사용할 수 있는 동일한 도메인 및 서브도메인 아래에 정리되어 Discover에 위치합니다. 이렇게 하면 비즈니스 컨텍스트가 별도의 도구가 아닌, 설명하는 물리적 자산 바로 옆에 놓이게 됩니다.

개념을 Unity Catalog 자산, 대시보드, 심지어 다른 Pages를 포함한 나머지 데이터 에코시스템과 연결하는 관계를 체계화할 수도 있습니다. 관련 자산(Related Assets) 섹션에서는 정의를 뒷받침하거나 설명하는 특정 워크스페이스 및 Unity Catalog 오브젝트를 카탈로그화할 수 있습니다. 출처(Sources) 필드에서는 Page가 파생된 신뢰할 수 있는 링크와 내부 오브젝트를 인용할 수 있으므로, 모든 정의가 검증 가능한 증거에 기반을 두도록 유지할 수 있습니다.

Genie Code로 대규모 Unity Catalog Pages 신속하게 구축하기

Pages를 직접 작성할 필요가 없습니다. Genie Code는 Databricks의 데이터 스마트 AI 동료로서, Unity Catalog 및 워크스페이스 자산, 첨부 파일, 링크, 그리고 Genie Code의 MCP 설정에서 구성한 Confluence, Slack, Google Docs, GitHub와 같은 MCP 연결 도구 등 지원되는 다양한 소스 자료를 활용하여 대신 Pages를 작성해 줄 수 있습니다. 올바른 소스를 지정하기만 하면 비즈니스 지식과 용어를 대량으로 추출하고 가져올 수 있어, 몇 주 동안 복사하여 붙여넣어야 했던 작업을 단 몇 분간의 대화로 단축할 수 있습니다. 

예를 들어, Genie Code에 조직의 주요 Confluence 페이지 중 하나를 제공하면 그 안에 묻혀 있는 개념과 전문 용어를 추출하여 각각을 독립된 개별 Page로 생성합니다. 첫 번째 Pages 세트를 시작하려면 Genie Code에서 "Bulk import pages" 대화 시작 도구를 클릭하세요.

시작하기

Unity Catalog Pages는 기업에 가장 중요한 개념을 관리할 수 있는 거버넌스 공간을 제공하며, 조직이 신뢰하는 권위 있는 의미를 큐레이션하고 협업할 수 있는 도구를 제공합니다. Genie Ontology의 큐레이션된 레이어인 Unity Catalog 시맨틱의 최신 기능으로서, 이러한 의미는 Genie One 및 에이전트에 직접 제공되어 일관되고 신뢰할 수 있는 컨텍스트를 기반으로 작동하도록 돕고, 비즈니스 로직을 가장 영향력 있는 작업이 이루어지는 데이터 자산에 연결해 줍니다.

Pages는 현재 베타 버전으로 제공됩니다. 자세한 내용은 제품 설명서에서 확인하시고, 계정 담당자에게 문의하여 직접 체험해 보세요.

(이 글은 AI의 도움을 받아 번역되었습니다. 원문이 궁금하시다면 여기를 클릭해 주세요)