Lakebridge 소개: 무료, 오픈 데이터 마이그레이션을 Databricks SQL로

우리는 소개하게 되어 기쁩니다 Lakebridge, 기업 데이터 웨어하우스 (EDW)를 Databricks SQL로 이전을 단순화하고 가속화하는 무료 이전 도구입니다.

레거시, 독립적인 데이터 웨어하우스에서 현대화하는 것은 많은 조직에게 Databricks의 오픈, 통합 플랫폼에서 더 빠른 인사이트를 얻고, 비용을 줄이며, 분석 및 AI 작업 부하를 통합하는 데 중요합니다. 그러나 마이그레이션은 종종 고위험으로 간주됩니다: 레거시 SQL 코드는 복잡하고, 의존성은 숨겨져 있으며, 문서화는 부족합니다. 번역된 로직을 검증하고, 데이터 품질을 보장하며, 수천 개의 SQL 스크립트와 저장된 절차를 조정하는 것은 가장 헌신적인 팀조차도 느리게 만들 수 있습니다.

Lakebridge는 프로파일링, SQL 변환, 검증, 및 조정을 포함하여 이주 과정의 최대 80%를 자동화함으로써 이러한 도전을 극복하는 데 도움을 줍니다.

Lakebridge와 함께 마이그레이션하는 동안 현대화하세요

Databricks SQL 는 가격/성능, 효율성, AI 기반 인사이트로 인정받는 업계에서 가장 빠르게 성장하는 데이터 웨어하우스입니다. 더 많은 조직들이 그들의 개방적이고 유연한 데이터 아키텍처의 기반으로 Databricks를 선택함에 따라, Lakebridge는 이전이 더 이상 병목이 아니라 전략적인 이점을 보장합니다.

• 이주 범위와 복잡성에 대한 명확한 이해
• 자동화된 고정밀 코드 변환 및 검증
• 데이터 정확성을 위한 마이그레이션된 작업 부하의 쉬운 조정
• Databricks SQL로의 여정을 가속화하는 검증된 경로

Lakebridge는 lift-and-shift 및 하이브리드 마이그레이션 접근법을 지원합니다. 하이브리드 접근법을 사용하면 첫 날에 모든 것을 현대화할 필요가 없습니다 - 안정적인 기반 위에 미래 요구 사항에 맞춰 구축할 수 있습니다. 

빠르고 예측 가능한 Databricks로의 마이그레이션 

대규모 마이그레이션의 도전 과제를 이해하는 경험 많은 현장 엔지니어와 실무자들이 구축한 Lakebridge 는 현대적이고 자동화 중심의 접근법으로 레거시 시스템의 복잡성을 해결합니다. 또한, Lakebridge는 확장 가능하여 Databricks 파트너들이 협업하고, 기능을 제공하고, 다양한 마이그레이션 요구 사항을 충족시키기 위해 도구를 발전시킬 수 있습니다.

Lakebridge는 세 가지 핵심 구성 요소를 통해 종합적이고 종단간 이주 경험을 제공합니다:

• 분석기: 기존 데이터 웨어하우스 환경에 대한 상세한 평가를 수행합니다.
• 변환기: 지능적으로 레거시 ETL 워크플로우와 SQL 스크립트--저장된 절차를 포함하여--를 성능이 좋고 호환되는 Databricks SQL 또는 Spark SQL 코드로 변환합니다.
• 검증기: 내장된 대조 도구를 사용하여 데이터의 정확성과 올바름을 보장합니다.

또한 Lakebridge는 이주 과정 동안의 투명성과 통제를 지원하기 위해 Databricks 내에 내장된 대시보드와 보고서를 제공합니다. 이러한 뷰를 통해 팀들은 진행 상황을 추적하고, 결과를 검증하며, 변화하는 데이터 환경을 더 잘 이해할 수 있어, 채택을 가속화하고 가치를 더 빠르게 제공합니다.

이러한 기능들로 인해 Lakebridge는 마이그레이션 작업의 최대 80%를 자동화하여 프로젝트 시간을 최대 2배 가속화하는 데 도움을 줍니다. 오늘날, Ladebridge는 10개 이상의 레거시 데이터 웨어하우스를 지원하며, 곧 더 많은 것들이 추가될 예정입니다.

더 나은 이주 계획

Lakebridge는 내장된 분석 도구를 통해 레거시 환경에 대한 초기, 상세한 인사이트를 제공함으로써 이전 프로젝트의 불확실성을 줄입니다. 메타데이터와 레거시 코드를 스캔하여 이전이 필요한 모든 객체, 예를 들어 테이블, 뷰, ETL 작업, 저장된 절차 등을 인벤토리에 넣고 복잡성에 따라 작업 부하를 분류하는 다중 탭 보고서를 생성합니다.

이러한 통찰력을 통해 팀은 프로젝트를 정확하게 범위 지정하고, 비즈니스 영향에 따라 우선 순위를 정하고, 단계적인 이주를 자신 있게 계획할 수 있습니다. 조기에 잠재적인 도전을 식별함으로써, Lakebridge는 더 원활한 실행, 더 나은 자원 계획, 그리고 더 효과적인 사용자 수용 테스트를 보장하고, 결국 Databricks로의 전환을 더 예측 가능하고 관리 가능하게 만듭니다.

종합적인 이전 솔루션

Lakebridge는 실제 세계에서 복잡한 기업 마이그레이션을 처리하도록 설계되었으며, 도구, 소스 커버리지, 자동화에 걸쳐 강력한 기능을 제공합니다.

• 넓은 소스 지원: Teradata, Snowflake, Oracle, SQL Server, Informatica 등 10개 이상의 주요 데이터 웨어하우스 및 ETL 도구에서 마이그레이션합니다. 추가 커넥터는 Private Preview에서 사용 가능하며 지속적으로 추가됩니다. 자세한 내용은 계정 팀에 문의하십시오.
• 전투 검증된 툴킷: Lakebridge는 BladeBridge에서 검증된 기술을 통합합니다—Accenture, Capgemini, Celebal Technologies, 그리고 Tredence와 같은 시스템 통합사들이 신뢰하는 이전 엔진입니다. 이 도구들은 고급 SQL 파싱, 코드 변환, 검증을 포함하여 수백 건의 성공적인 이전을 지원했습니다.
• 엔드 투 엔드 워크플로우: 작업 부하 발견 및 평가에서 코드 변환 및 데이터 검증에 이르기까지, Lakebridge는 마이그레이션 수명주기의 모든 단계를 다룹니다. Code Converter와 Data Validator와 같은 도구들은 프로세스 전반에 걸쳐 무결성과 성능을 보장합니다.
• 검증된, 예측 가능한 결과: 주요 기업 및 파트너들이 채택한 기술을 기반으로, Lakebridge는 팀이 일정을 준수하고 현대화 목표를 지향하는 데 도움을 줍니다.

파트너와 고객들은 또한 Lakebridge 위에 마이그레이션 도구를 구축할 수 있습니다. 예를 들어, DoorDash는 Lakebridge로 마이그레이션 팩토리를 구축했습니다. 

데이터 상호 운용성은 현대적인 레이크하우스 아키텍처에서 필수적입니다. 이는 성능, 일관성, 또는 개발자 속도를 저하시키지 않고 다른 엔진과 팀 간에 원활한 데이터 접근을 가능하게 합니다. Transaxle과 같은 SQL 번역기(Lakebridge 기반)는 이러한 상호 운용성을 현실로 만드는 데 중요합니다. 이들은 방언 간의 차이를 연결하고, 인간의 오류를 줄이며, 공유 데이터 자산의 더 빠르고 협업적인 사용을 가능하게 합니다. 

—Harsha Venkat Annapa Reddy, 데이터 기반 엔지니어링 매니저, DoorDash

Lakebridge는 또한 데이터와 로직을 열린 형식, 카탈로그, 기술로 마이그레이션함으로써 오픈 표준에 기반한 현대화를 가능하게 합니다. 이 솔루션은 BTEQ (Teradata), T-SQL (Microsoft), PL/SQL (Oracle)과 같은 독점적인 구문을 Databricks SQL에서 원활하게 실행되는 개방형, ANSI 준수 SQL로 변환합니다. 이 접근 방식은 공급 업체의 독점에서 벗어나게 하고, Databricks의 개방적이고 상호 운용 가능하며 미래 준비가 된 데이터 생태계를 최대한 활용하게 하는 데에 있어 비즈니스를 위치시킵니다.

비즈니스 신뢰도 향상

데이터 웨어하우스와 ETL 작업 부하를 Databricks로 마이그레이션하는 것은 변혁적인 비즈니스 결정이지만, 비즈니스는 데이터 품질, 호환성, 프로젝트 위험에 대한 확신이 필요합니다. Lakebridge는 실시간 대시보드, 자동 검증, 엔드 투 엔드 추적성을 통해 데이터 웨어하우스 마이그레이션의 모든 단계에 대한 명확한 가시성을 제공함으로써 이러한 문제를 해결합니다. 마이그레이션의 다양한 단계를 통해 사업 리더들이 명확성과 확신을 가지고 전진할 수 있도록 Lakebridge는 불확실성의 원인이 되는 마이그레이션을 전략적 이점으로 전환합니다.

다음은 무엇인가요?

Databricks는 마이그레이션 프로세스를 향상시키는 데 전념하고 있으며, 이를 더 빠르고, 똑똑하고, 예측 가능하게 만듭니다. 다음 몇 개월 동안 고급 AI에 의해 구동되는 차세대 마이그레이션이 도입될 예정입니다.

곧 Lakebridge는 다음을 포함하게 될 예정입니다:

• Mosaic AI가 강화 학습을 활용하여 번역 정확도를 향상시키는 코드 변환.
• 데이터 이주를 자동화하고 최적화하는 전용 데이터 이주 모듈.
• 직관적인 탐색, 이전 추적, 검증 인사이트를 위한 그래픽 사용자 인터페이스 (GUI).

이러한 개선 사항들은 대기업 요구에 맞게 구축된 GenAI 기반 마이그레이션 솔루션을 제공하는 더 넓은 비전의 일부로, 안전장치가 있는 대형 언어 모델을 적용합니다. 일반적인 AI 도구와 달리, Lakebridge AI는 생성된 모든 출력이 검증되고 추적 가능하며 원본 로직에 기반을 두도록 특별히 제작되었습니다.

고객들은 자신들의 속도에 맞춰 GenAI 기능을 선택적으로 사용할 수 있어, 이주 과정 전반에 걸쳐 더 큰 자신감, 속도, 그리고 통제력을 보장합니다.

시작하기

Lakebridge Foundations 은 이제 Databricks 고객 및 파트너에게 무료입니다. 첫 마이그레이션을 계획하든 수백 개의 작업 부하로 확장하든, Lakebridge는 현대화를 자신감 있게 진행하는 데 필요한 자동화, 지능, 신뢰성을 제공합니다.

(이 글은 AI의 도움을 받아 번역되었습니다. 원문이 궁금하시다면 여기를 클릭해 주세요)