가을이 오면서 Databricks AI/BI는 계속 발전하여 모든 사람에게 더 빠르고 스마트한 인사이트를 제공합니다. 지난 몇 달 동안 AI/BI Dashboards 와 Genie 는 분석을 더욱 직관적이고, 거버넌스가 적용되며, 지능적으로 만들 수 있는 새로운 기능을 추가했습니다. 주요 기능으로는 외부 애플리케이션에 대시보드를 삽입하는 기능, 더 강력한 거버넌스를 위해 태그와 인증을 적용하는 기능, Genie의 확장된 APIs와 개선된 추론 경험을 통해 데이터를 탐색하는 기능이 있습니다.
Databricks에 직접 내장된 AI/BI 는 시각화, 자연어 탐색, 거버넌스를 하나의 플랫폼으로 통합하여 사용자가 데이터 인텔리전스 플랫폼을 벗어나지 않고도 인사이트를 분석하고 공유할 수 있도록 합니다. 대시보드를 구축하든, Genie에게 트렌드 이면의 '이유'를 밝혀달라고 요청하든, 팀 전체에 걸쳐 인사이트를 확장하든, AI/BI는 더 적은 도구와 마찰, 그리고 훨씬 더 많은 인텔리전스를 통해 데이터를 의사 결정으로 전환합니다.
시작하려면, 이번 릴리스에서 가장 많은 기능이 추가된 AI/BI 대시보드와 Genie의주요 업데이트 내용을 살펴보세요 .
외부 사용자용 임베딩을 통해 이제 AI/BI 대시보드를 고객, 파트너, 공급업체 등 조직 외부의 대상을 위해 구축된 애플리케이션에 Databricks 계정 없이 안전하게 임베딩할 수 있습니다. 이러한 임베디드 대시보드는 Unity Catalog를 통해 데이터 거버넌스를 유지하며, OAuth 토큰을 통해 애플리케이션을 인증하는 service principal 을 사용하여 액세스를 관리하므로 개발자는 데이터 액세스 및 권한을 정밀하게 제어할 수 있습니다.
각 뷰어의 경험은 프로필 또는 역할에 따라 결과를 동적으로 필터링하는 사용자 범위 토큰 을 사용하여 개인 설정할 수도 있습니다. 그리고 AI/BI는 임베디드 및 내부 대시보드에 동일한 소비 기반 가격 책정 모델을 사용하므로, 기본 컴퓨팅 비용만 지불하면 되며 임베디드 분석에 대한 추가 뷰어 또는 조회당 수수료는 없습니다. 제품 사용량을 보여주는 고객 포털이든, 주요 성능 지표를 강조하는 파트너 대시보드이든, 외부 사용자를 위한 임베딩을 통해 신뢰할 수 있는 인사이트를 Databricks 환경 외부로 쉽게 확장할 수 있습니다.
외부 사용자를 위한 대시보드 임베딩을 설정하는 방법에 대해 자세히 알아보려면 제품 설명서를 검토하세요.

이제 막대형 차트에서 데이터에서 가장 실적이 좋은(또는 가장 나쁜) 카테고리만 강조 표시할 수 있습니다. 축에 모든 카테고리를 표시하는 대신, 플롯하려는 메트릭에 따라 상위 또는 하위 N개의 카테고리만 표시하도록 선택할 수 있습니다. 이 기능을 사용하려면 막대형 차트의 범주형 축 차원에 대한 케밥 메뉴를 열고 Default 범주 수를 원하는 값으로설정합니다 . 이 기능은 데이터세트를 수동으로 필터링하지 않고도 상위 10개 고객 또는 하위 5개 제품과 같은 이상값에 집중할 수 있는 이상적인 방법을 제공합니다.

대시보드에서 자동으로 생성되는 Genie spaces는 이제 포함된 자격 증명 을 지원하므로 모든 Genie query는 대시보드 자체와 동일한 데이터 권한을 사용하여 실행됩니다. 포함된 자격 증명으로 대시보드를 게시하면 Genie는 게시자의 자격 증명을 사용하여 query를실행하므로 뷰어는 자체 데이터 액세스 없이 관련 질문을 탐색할 수 있습니다. 포함된 자격 증명 없이 게시된 대시보드는 뷰어의 권한을 사용하여 query를 계속 실행하므로 조직의 거버넌스 모델이 유지됩니다. 또한 이러한 개선 사항을 통해 Genie의 대화형 기능이 외부에 포함된 대시보드 에도 적용되므로 사용자는 Databricks로 전환할 필요 없이 이미 작업 중인 애플리케이션 내에서 직접 안전하게 후속 질문을 하고 AI 기반 인사이트를 얻을 수 있습니다.
이제 AI/BI 대시보드에서 예약된 스냅샷을 Slack 채널에 직접 전달하여 팀이 매일 사용하는 도구에 대한 인사이트를 제공할 수 있습니다. 각 게시물에는 대시보드의 PNG 이미지미리보기, Databricks에서 열 수 있는 직접 link,메시지 스레드에 PDF 스냅샷 첨부 파일이 포함됩니다. Slack 전달은 기존 대시보드 일정과함께 작동하며, 예약된 각 refresh가 완료되면 최신 스냅 샷이 선택한 채널에 자동으로 공유됩니다. 이메일 구독과 마찬가지로, 이해 관계자가 항상 대시보드를 수동으로 확인할 필요 없이 적시에 업데이트와 신뢰할 수 있는 인사이트를 바로 푸시 받을 수 있습니다.

최근 사용자 지정 계산에 170개 이상의 새로운 함수가 추가되었습니다. 여기에는 이동 집계를 compute하는 AGGREGATE OVER와 복잡한 표현식 없이 조건부 필터를 적용하는 FILTER(WHERE ...) 지원이 포함됩니다. 또한 사용자 정의계산은 이제 IN, BETWEEN, 패턴 일치(LIKE, ILIKE, RLIKE) 등의 술어도 인식하므로 작성자가 데이터 로직을 더욱 유연하게 구성할 수 있습니다. 사용자 지정 계산에서 지원되는 함수의 전체 목록을 보려면 제품 설명서를 확인하세요.
Genie의 API 기능이 크게 확장되어 대화형 분석을 자체 애플리케이션에 더 쉽게 관리, 모니터링, 통합할 수 있게 되었습니다. 이제 새로운 Endpoint를 통해 사용자 피드백(좋아요 또는 싫어요) 기록, 제안된 후속 질문 검색, 메시지 삭제, 검토를 위한 모든 대화 및 메시지 나열, API 응답에서 관련 warehouse ID와 같은 추가 메타데이터 반환이 가능합니다. 또한 Genie는 플랫폼 전반에 걸쳐 일관된 권한 처리를 위해 Databricks Permission APIs 를 채택했습니다. 이러한 개선 사항을 통해 팀은 프로그래밍 방식으로 Genie의 동작을 개선하고, 피드백을 수집하며, 필요한 모든 곳에 대화형 인텔리전스를 임베딩하는 작업을 간소화할 수 있습니다. 자세한 내용은 Genie API 사용 및 Genie space 설정에 대한 설명서를 참조하세요.
Genie의 벤치마킹 도구가 개편되어 공간의 정확도를 더 간단하게 평가하고 더 높은 수준의 엄격함을 적용할 수 있게 되었습니다. 이제 작업 메뉴에서 벤치마크로 추가를 선택하여 채팅 응답에서직접 벤치마크를 만들거나 모니터링 페이지를 통해 다른 사용자 프롬프트에서 벤치마크 세트를 만드는 것이 훨씬 더 간단해졌습니다. 벤치마크 추가 모달에는 초안 답변을 작성하는 SQL 생성 옵션도 있습니다. 또한 채점 기능을 개선하여 정확도를 더 정확하게 판단하고 오답을 설명할 수 있도록 했습니다. 또한 이제 벤치마크가 비동기식으로 실행되므로 완료되는 동안 작업할 수 있습니다.

스페이스 작성자가 벤치마크 실행 시점을 파악하는 데 도움을 주기 위해, 이제 Genie 컨텍스트에 실질적인 변경이 감지되면 Genie가 벤치마크를 다시 실행하라는 메시지를 표시합니다. 벤치마크 실행이 완료되면 더 나은 Genie 생성 답변을 새로운 정답(ground truth)으로 저장할 수 있습니다.
이제 Genie 지식창고에서 작성자가 구조화된 비즈니스 의미를 정의하여 Genie의 정확도를 향상시킬 수 있습니다. 테이블 관계에 대한 Genie의 이해를 높이기 위해 스페이스 작성자가 테이블을 선택하고, 조인 열을 선택하고, 관계 유형(다대일, 일대다 또는 일대일)을 선언하여 Genie 지식 저장소 내에서로컬 조인 관계를 정의할 수 있도록 기능을 개선했습니다 . 여러 조인 또는 자체 조인이 있는 경우 Genie가 자동으로 테이블 별칭을 추가합니다.

또한 Genie에게 일반적인 필터, 측정값 및 차원에 대해 직접 가르칠 수 있는 안내 방식인SQL 표현식도 출시했습니다.

마지막으로, Genie는 이제 사용자 피드백으로부터 직접 학습하는 데 도움이 되는 새로운 기능인 지식추출을 포함합니다. 사용자가 생성된 query에 좋아요를 누르면 Genie는 해당 상호작용을 분석하여 잠재적인 측정값, 차원 또는 필터와 같은 지식 스니펫을 제안합니다. 스페이스 작성자는 지식창고에 추가하기 전에 이러한 스니펫을 검토하고 승인할 수 있으므로 Genie가 실제 사용을 통해 데이터에 대한 이해를 지속적으로 개선하는 데 도움이 됩니다.

종합적으로, 위의 Knowledge Store 업데이트는 Genie가 데이터를 이해하고 사용하는 방식에 대해 훨씬 더 많은 제어권을 제공합니다.
최근 Genie와의 상호작용을 훨씬 더 직관적으로 느낄 수 있도록 몇 가지 주요 업데이트를 추가했습니다. 먼저 Genie는 프롬프트를 어떻게 해석했는지, 어떤 테이블과 SQL query를 사용했는지 보여주는 새로운 사고 단계 패널을 통해 그 추론을 공 개합니다. 이를 통해 비전문가인 사용자도 SQL을 이해하지 않고도 답변의 정확성을 검토할 수 있습니다. 둘째, 이제 사용자가 데이터 인사이트를 빠르게 이해할 수 있도록 생성된 query 결과에 대한 자연어 요약을 반환합니다. 이러한 변화를 통해 모든 대화가 더욱 명확해집니다.

또한 후속 질문에서 지속되는 피드백 옵션과 날짜 및 숫자에 대한 parameter 편집 기능 등 몇 가지 삶의 질 개선 사항도 눈에 띕니다. 전반적으로 이러한 업데이트를 통해 Genie의 답변을 해석하고, 이해하고, 구체화하기가 그 어느 때보다 쉬워졌습니다.

이제 AI/BI 대시보드와 Genie spaces 모두에 관리형 태그와 시스템 인증 레이블을 적용하여 신뢰할 수 있는 분석 자산을 더 쉽게 정리, 분류, 검색할 수 있습니다. 관리형 태그 는 Unity Catalog에서 중앙에서 정의된 태그 정책을 통해 workspace 전체에 일관된 레이블 지정을 보장하여 팀이 부서, 프로젝트 또는 비즈니스 도메인 과 같은 개념별로 대시보드와 Genie spaces를 분류하는 데 도움이 됩니다. 인증은 시스템 관리형 태그로, data steward가 자산을 인증됨 또는 사용되지 않음으로 표시하여 신뢰성과 수명 주기 상태를 한눈에 알릴 수 있게 해줍니다. 대시보드 태그 와 Genie space 태그 는 함께 AI/BI에 강력한 거버넌스 및 검색 기능을 제공합니다.

위 이미지는 태그 및 인증이 적용된 대시보드이며, 아래 이미지는 Genie의 경우 동일한 대시보드를 보여줍니다.

주요 기능 외에도 AI/BI Dashboards 와 Genie 에서는 신뢰성, 성능, 사용성을 개선하기 위한 stream의 기능 향상이 꾸준히 이루어지고 있습니다. 최근 몇 달간의 몇 가지 주목할 만한 업데이트는 다음과 같으며, 자세한 내용은 AI/BI 릴리스 노트에서 확인할 수 있습니다.



AI/BI는 지속적인 피드백과 혁신을 통해 계속해서 발전하고 있습니다. 앞으로 몇 달 동안 대시보드와 Genie를 모두 발전시켜 모든 사람이 더욱 간단하고 스마트하며 쉽게 분석 에 액세스할 수 있도록 하는 데 집중할 것입니다. 로드맵의 몇 가지 주요 투자 분야는 다음과 같습니다:
Databricks AI/BI로가능한 기능을 계속 확장해 나갈 예정이니 더 많은 업데이트를 기대해 주세요.
AI/BI의 최신 기능을 살펴볼 준비가 되셨다면 다음 옵션 중 하나를 선택할 수 있습니다.
더 많은 혁신이 곧 출시될 예정이니 계속 지켜봐 주세요!
(이 글은 AI의 도움을 받아 번역되었습니다. 원문이 궁금하시다면 여기를 클릭해 주세요)
