Lakeflow로 데이터 애플리케이션 구축하기
학습할 내용
이 동영상은 Lakeflow를 사용하여 데이터 애플리케이션을 구축하는 포괄적인 접근 방식을 보여주며, 데이터 수집, 변환, 초개인화와 같은 주요 개념을 강조합니다. Salesforce, Microsoft SQL Server, 레거시 메인프레임 등 서로 다른 시스템의 데이터를 통합 레이크하우스로 통합하는 방법을 보여줍니다. 나아가 선언적 파이프라인을 사용하여 효율적인 데이터 처리를 하고, 고객별 추천을 생성하며, 프로덕션 환경에서 작업 성능, 비용, 데이터 품질을 모니터링하는 방법을 확인할 수 있습니다.
참고: Databricks Lakeflow는 데이터 엔지니어링을 Lakeflow Connect, Lakeflow Spark Declarative Pipelines(이전 명칭: DLT), Lakeflow Jobs(이전 명칭: Workflows)와 통합합니다.
