AI/BI Genie가 이제 일반적으로 사용 가능합니다

지난 6월, 우리는 Databricks AI/BI를 발표하며 비즈니스 인텔리전스 분야에 진출했습니다. 이는 귀하의 데이터, 의미 체계 및 사용 패턴을 깊이 이해하는 AI를 중심으로 구축되었으며, Data Intelligence Platform을 최대한 활용할 수 있도록 처음부터 설계되었습니다. AI/BI는 Dashboards를 통해 전통적인 BI 경험을 제공할 뿐만 아니라, 모든 사람이 자연어를 통해 자신의 데이터 질문에 답할 수 있도록 하는 대화식 분석 경험을 제공하는 Genie 기능도 포함하고 있습니다. 오늘, 우리는 기쁜 마음으로 AI/BI Genie가 이제 AI/BI Dashboards와 함께 모든 클라우드에서 일반적으로 사용 가능하다는 것을 공유하게 되었습니다.

Genie란 무엇인가요?

AI/BI Genie의 핵심은 사용자가 자연어로 질문을 하고 데이터로부터 즉시 통찰력을 얻을 수 있게 하는 것 입니다. 비즈니스사용자는 "내 판매 파이프라인은 어떻게 되고 있나요?"와같은 질문을 할 수 있으며, Genie는 텍스트 요약, 표 형식의 데이터 및 시각화의 조합으로 답변합니다. 모든 응답에는 Genie가 어떻게 답변에 도달했는지에 대한 설명도 제공되어 사용자가 출력 결과에 대한 신뢰를 갖게 합니다.

Genie를 통해 우리의 목표는 실제 세계에서 광고된 대로 실제로 수행하는 대화식 분석 경험을 제공하는 것입니다 - 귀하의 조직의 독특한 맥락 내에서 정확하고 관련성 있는 응답. 이것은 최신의 최고의 LLM들에게도 도전이며, 그들은 각 조직의 데이터와 비즈니스에 특정한 독특한 맥락이나 의미를 이해하지 못합니다.

AI/BI Genie는 분석가들이 데이터(테이블 및 뷰와 같은)와 의미론(메트릭 정의, 샘플 쿼리, 텍스트 지침 및 인증된 자산과 같은)을 특정 주제에 초점을 맞춘 Genie 공간에 패키지화할 수 있도록 함으로써 이 문제를 해결합니다. 예를 들어, 판매 파이프라인.

Genie 공간은 지역 지식 저장소 역할을 하며, Data Intelligence Platform에 있는 기존 자산에서 추출한 의미 체계와 전문 분석가가 제공하는 큐레이션 및 피드백을 결합합니다. 본질적으로, 이 시스템은 데이터 분석가가 그들이 할 것처럼 데이터 질문에 답할 수 있는 지식이 있는 에이전트를 만들어 그들의 영향력을 확장할 수 있게 합니다. 이는 기존 대시보드와 보고서에서 다루지 않는 질문을 비즈니스 사용자가 스스로 질문할 수 있게 하여, 분석가가 더 높은 가치의 작업에 집중할 수 있게 합니다.

발표 이후의 업데이트

우리가 지난 6월에 AI/BI Genie를 발표한 이후로, 우리는 더 많은 기능, 신뢰할 수 있는 답변 품질, 그리고 우리의 프리뷰 고객들로부터의 피드백에 기반한 개선된 사용자 경험을 도입하기 위해 열심히 노력해 왔습니다.  다음은 몇 가지 하이라이트입니다:

• 최고 수준의 정확도:   응답 품질은 Genie 제품 팀의 최우선 과제이며, 우리의 초점은 수천명의 활성 고객들이 제기한 실제 세계의 문제를 해결하는 데 있었습니다. 예를 들어, 우리는 값 사전이라는 개념을 추가했는데, 이는 아래의 예에서 보여주는 것처럼 Genie가 "첫 번째 레벨 그룹"에 대한 요청을 기본 데이터에 있는 것에 따라 "1st line support group"이라는 실제 값에 의미론적으로 일치시킬 수 있게 합니다. Genie는 이제 훨씬 더 큰 데이터셋(제로 열 수 제한), 복잡한 지시사항을 처리할 수 있으며, 여러 차례의 모델 업데이트를 거쳤습니다. 

• Unity 카탈로그 메트릭 뷰: Genie는 데이터 인텔리전스 플랫폼에 기본적으로 구축되었으며, 우리는 계속해서 그 기반을 확장하고 있습니다. 예를 들어, 우리는 Unity 카탈로그 메트릭을 지원하게 되어, 고객들이 통제된, 신뢰할 수 있는 데이터 모델을 사용하여 중요한 사용 사례에 대한 정확성을 보장할 수 있게 되었습니다. AI/BI Genie와 Unity 카탈로그를 사용하면 데이터와 의미론에 대한 단일 진실의 원천이 되어 중복 모델링의 필요성을 제거합니다.
• 평가와 벤치마크 지원: 숙련된 엔지니어들은 어떤 AI 노력도 평가 단계로 시작해야 한다고 말할 것입니다. 그렇지 않으면 생산에서 실패하게 됩니다. 대화식 분석 경험도 다르지 않습니다 - 새로운 Genie 공간을 만들 때, 실제로는 특정 도메인에 대한 새로운 AI 시스템을 만드는 것입니다. 이것이 우리가 벤치마크와 리뷰 요청과 같은 기능을 추가한 이유입니다. Genie 벤치마크는 기대되는 SQL 답변이 있는 정제된 테스트 질문으로, 저자들이 시간이 지남에 따라 Genie의 응답의 정확성을 체계적으로 평가하고 향상시키게 해줍니다, 반면 '리뷰 요청'은 최종 사용자들이 특정 응답을 검증하거나 수정하기 위해 공간 관리자에게 플래그를 설정할 수 있게 해줍니다, 이는 비즈니스 사용자와 데이터 팀 사이의 신뢰와 협업을 촉진합니다.

• Genie 파일 업로드를 통한 임시 분석: 프리뷰 기간 동안 우리가 발견한 일반적인 분석 패턴 중 하나는 로컬 스프레드시트(예: 캠페인에서 나온 리드 목록)를 Unity 카탈로그의 관리 데이터셋(예: Salesforce 계정 및 연락처)과 결합하여 임시 작업을 완료하는 것이 필요했습니다. Genie 파일 업로드를 사용하면, 단순히 Excel 또는 CSV 파일을 Genie로 드래그 앤 드롭하여 자연어를 통해 어떤 종합적인 분석도 완료할 수 있습니다.

• Genie 어디서나: 대시보드와 Genie는 함께 사용할 때 더 잘 작동합니다 - 그래서 모든 AI/BI 대시보드에는 통합된 Genie 공간이 포함되어 있습니다. 대시보드는 탐색 가능한 데이터를 보여주며, Genie는 사용자가 미리 정의된 슬라이스, 필터, 조합의 한계를 넘어서는 것을 가능하게 합니다 - 모두 같은 경험 내에서. 또한, 새로운 Genie 대화 API를 사용하면, 개발자들은 마찬가지로 Genie를 Slack, Microsoft Teams, 또는 사용자 정의 내부 애플리케이션과 같은 협업 도구에 임베드할 수 있습니다. 이는 비즈니스 사용자들이 작업 흐름 내에서 대화식 분석에 접근하는 새로운 방법을 열어줍니다 - 맥락을 전환하거나 별도의 인터페이스에 로그인할 필요 없이.

우리는 또한 개선된 시각화부터 사용자 인터페이스를 재설계하여 최종 사용자가 분석을 통해 안내하도록 하는 다양한 기타 향상 기능을 제공하였습니다. GA 이후에도 이러한 고기능 속도를 계속 유지할 계획이니, AI/BI 릴리스 노트 를 확인하고 시간이 지남에 따라 기능을 추가하면서 더 많은 블로그를 기대해 주십시오.

Genie를 통한 실제 성공 사례

우리는 Genie의 빠른 채택에 매우 기쁘게 생각하고 있습니다; 프리뷰 기간 동안 4000명 이상의 고객들이 AI/BI Genie를 채택했습니다 데이터를 민주화하고 비기술 사용자들을 강화하기 위해. 다음은 우리의 프리뷰 고객들 중 일부가 Genie에 대해 우리와 공유한 것들의 샘플입니다:

Genie는 HP 팀을 어떻게 강화하는지 변화시키고 있습니다. 그 직관적인 자연어 인터페이스를 통해, 사용자가 코딩 없이 즉시 중요한 데이터에 접근할 수 있게 하여, 데이터 기반의 통찰력을 더 빠르고 효율적으로 만들고 있습니다.  — 브루스 힐스버그, 부사장, 데이터 엔지니어링 & 인사이트, 기술 & 혁신, HP Inc

사용자들은 계속해서 분석가들에게 물어봤습니다 - 헤이, 남서부 지역의 판매는 작년에 비해 어떻게 보였나요? - 올바른 분석가를 찾아서 그들이 답변을 올바르게 얻을 수 있기를 바라는 대신에 Genie에게 그냥 물어볼 수 있다는 생각은 비즈니스에게 매우 흥미롭게 다가왔습니다.  — 샤히르 미르자, 데이터, AI/ML, 및 R&D의 시니어 디렉터, 7-Eleven

마케팅 및 재무 분야의 경영진 및 기타 LOB 리더들은 Genie를 사용하여 그들이 필요로 하는 데이터에 단순한 영어만을 사용하여 접근할 수 있습니다. 정말 놀라운 일입니다. — Felix Baker, 데이터 서비스 관리자, SEGA Europe

우리는 Genie를 통해 엄청난 성공을 거둔 많은 다른 고객들을 가지고 있습니다. Premier Inc, Magic Orange, The AA, 그리고 Casas Bahia 등이 있습니다. 우리는 Genie를 일반적으로 사용 가능하게 함으로써 더 많은 조직들이 그들에게 합류할 수 있게 하는 것에 대해 기대하고 있습니다. 

차세대 지식 스토어

Genie의 핵심은 그 지식 저장소입니다 - Genie의 AI 시스템이 질문에 답할 때마다 참조하는 생동감 있는 의미 모델입니다. 우리는 이제 저희 지식 저장소의 다음 세대를 출시하고 있으며, 이를 통해 저자들이 훨씬 더 세밀한 수준에서 훨씬 적은 노력으로 지식을 큐레이션할 수 있게 됩니다. 저자들은 데이터 자산에 직접 지식을 추가할 수 있으며, 이에는 열 수준 동의어와 샘플 값, 그리고 기본/외래 키 조인이나 인증된 메트릭 등의 테이블 수준 컨텍스트가 포함됩니다. Genie의 복합 AI 시스템은 각 질문에 대해 정확한 답변을 제공하기 위해 필요한 지식 부분을 검색할 수 있습니다. 

이런 개선사항들이 있음에도 불구하고, 의미론을 정리하는 것은 여전히 번거로운 일입니다. 이 과정을 훨씬 쉽게 만들기 위해, 지니는 이제 지식 마이닝 및 추출을 수행합니다. 

지식 마이닝(위)은 Genie가 Unity Catalog의 계보와 쿼리 이력을 통해 새로운 지시사항을 제안하거나 지식 저장소로 승격할 만한 반복 패턴을 강조하면서 Unity Catalog의 거버넌스 보장을 유지할 수 있게 합니다. 

우리는 또한 지식 스토어를 부트스트랩하는 이전 참조가 없는 새로운 사용 사례에 Genie를 활용하는 많은 고객들을 가지고 있습니다.  이러한 경우를 처리하기 위해, 우리는 지니의 지식 추출 기능을 향상시켜 정기적인 사용의 일부로 큐레이션을 수행하도록 했습니다. 모든 채팅 세션 동안, 지니는 의미론적 정보를 추출하고, 간결한 지식 스니펫을 제안하며, 사용자가 승인하면 그것들을 저장소에 커밋합니다. 

내장된 활동 모니터링 및 피드백 루프와 결합하면, 일상적인 사용 자체가 Genie의 의미 모델을 주기적인 개편 없이 정확하게 유지하는 연속 학습 파이프라인이 됩니다.

Genie 깊은 연구

Genie의 GA는 중요한 이정표이지만, 우리는 AI를 우선으로하는 BI를 재구성하는 여정에서 속도를 줄이지 않을 것입니다. Genie Deep Research의 미리보기를 발표하게 되어 기쁩니다 - Genie의 새로운 모드로, 더 복잡하고 다단계의 질문을 해결하기 위해 설계되었습니다. 지금까지, Genie는 "무슨 일이 일어났는가"에 대한 질문 (예: "우리의 판매 파이프라인은 무엇인가요?")에 최적화되어 있었습니다. "왜"와 "어떻게"에 대한 질문 (예: "판매가 왜 줄었나요?" 또는 "파이프라인을 어떻게 늘릴 수 있나요?")에 대답하려면 사용자가 자신의 가설을 형성하고 Genie에게 각각을 개별적으로 테스트하도록 요청해야 했습니다. Deep Research를 통해, Genie는 이러한 유형의 질문을 다루기 위해 최신 LLM 연구의 진보를 활용할 것입니다 연구 계획을 수립하고 여러 가설을 동시에 분석함으로써 결과를 요약하기 전에.

나머지 Genie와 마찬가지로, Deep Research는 Genie의 지식 저장소를 기반으로 확장하여 정확하고 신뢰할 수 있는 결과를 제공할 것입니다. Genie는 또한 그것이 도출한 결론에 대한 명확한 인용을 명시적으로 제공하고, 그 과정에서 수행된 모든 작업을 검토하는데 쉬운 원 클릭 경험을 제공할 것입니다.   딥 리서치는 이번 여름에 지니 고객들에게 실험적인 기능으로 제공될 예정입니다. 

AI/BI Genie를 귀하의 비즈니스 팀에 도입하기 

Genie를 널리 배포하는 것에 대해 고객들로부터 들은 소수의 우려 중 하나는 AI/BI에 접근하려면 기술적인 Databricks 작업 공간을 탐색해야 한다는 것이었습니다. 이는 비기술적인 비즈니스 사용자에게는 위협적으로 느껴질 수 있습니다. 우리의 데이터 및 AI 서밋 발표의 일환으로, 우리는 비즈니스 팀에게 AI/BI Dashboards와 Genie 공간, 그리고 Databricks 앱에 간단하고 안전하게 접근할 수 있는 새로운 경험을 제공하는 소개하는 Databricks One 을 소개하게 되어 기쁩니다. AI/BI와 마찬가지로, Databricks One 은 모든 Databricks SQL 고객에게 무료로 제공됩니다.  

자세히

AI/BI Genie와 대시보드는 이제 추가 라이선스 없이 Databricks SQL 고객들에게 사용 가능합니다. 더 자세히 알고 싶다면, AI/BI Genie 웹 페이지를 확인하고 다음의 내용을 탐색하여 시작할 수 있습니다:

1. 문서: 우리의 문서를 통해 더 자세히 알아보세요.
2. 데모: 우리의 데모를 비디오, 제품 투어 를 살펴보고 실습 튜토리얼 을 통해 이 AI/BI가 어떻게 작동하는지 확인해 보세요.
3. 훈련: 무료 제품으로 시작해 보세요 훈련 Databricks Academy를 통해
4. eBook: 비즈니스 인텔리전스가 AI를 만나다 eBook다운로드

만약 당신이 기존의 Databricks 고객이 아니라면, Genie와 다른 Databricks 제품을 시험해 볼 수 있도록 무료 시험판 에 가입할 수도 있습니다.

 

(이 글은 AI의 도움을 받아 번역되었습니다. 원문이 궁금하시다면 여기를 클릭해 주세요)