Building ETL Pipelines with SQL - Korean
이 과정에서는 Databricks Data Intelligence Platform에서 순수 SQL을 사용하여 생산 준비가 완료된 ETL 파이프라인을 구축하는 방법을 학습합니다. 수강생은 증분 수집을 위한 Auto Loader를 활용한 Streaming 테이블, 실버에서 골드로의 변환을 위한 증분 갱신이 적용된 구체화된 뷰(Materialized Views), 선언적 SCD Type 1 및 Type 2 차원 관리를 위한 AUTO CDC(FLOW AUTO CDC), 그리고 데이터 품질 기대값, PRIVATE 테이블, 통합 모니터링을 갖춘 생산 다중 테이블 파이프라인으로 이러한 객체를 그룹화하는 Apache Spark Declarative Pipelines(SDP)를 학습합니다. 이 과정은 메달리온 아키텍처(브론즈 → 실버 → 골드)를 따라 실제 소매 데이터셋을 다룹니다. Lakeflow Jobs를 활용한 오케스트레이션은 보너스 모듈로 제공됩니다.
참고: SCORM 강의 파일을 이용할 때는 콘텐츠를 모두 학습한 후 SCORM 창을 닫으시기 바랍니다. ‘다음 강의’ 버튼을 클릭하지 마십시오. 클릭할 경우 SCORM 모듈이 완료로 표시되지 않을 수 있습니다.
이 과정에서는 다음과 같은 기술/지식/능력을 가진 참가자들을 위해 내용이 개발되었습니다:
• Databricks 워크스페이스 탐색 (사이드바, 카탈로그 탐색기, SQL 편집기)
• Unity Catalog 기본 개념 (카탈로그, 스키마, 테이블, 볼륨)
• 중급 SQL (SELECT, JOIN, GROUP BY, CAST, COALESCE, CREATE TABLE)
• 데이터 웨어하우징 개념 (팩트/디멘전 테이블, 스타 스키마, 메달리온 아키텍처)
• ETL 워크플로우에 대한 기본 이해
Self-Paced
Custom-fit learning paths for data, analytics, and AI roles and career paths through on-demand videos
Registration options
Databricks has a delivery method for wherever you are on your learning journey
Self-Paced
Custom-fit learning paths for data, analytics, and AI roles and career paths through on-demand videos
지금 등록하세요
Instructor-Led
Public and private courses taught by expert instructors across half-day to two-day courses
지금 등록하세요
Blended Learning
Self-paced and weekly instructor-led sessions for every style of learner to optimize course completion and knowledge retention. Go to Subscriptions Catalog tab to purchase
Purchase now
Skills@Scale
Comprehensive training offering for large scale customers that includes learning elements for every style of learning. Inquire with your account executive for details
