Apache Spark Structured Streaming en Mode temps réel - Démonstration de la latence

Qu'allez-vous apprendre ?

Dans cette présentation technique, Frank Munz utilise une démo de Neil Patel pour démontrer les gains de latence liés au passage du Micro-Batch Mode (MBM) au Real-Time Mode (RTM) dans Apache SparkTM Structured Streaming. Après avoir déployé un Declarative Automation Bundle (DAB) pour configurer l'environnement, Frank établit une référence MBM, puis met à jour le Trigger sur RTM et montre la baisse de la latence. La vidéo se termine par une analyse approfondie du code sous-jacent.

Recommandations

<p data-pm-slice="1 1 []">Getting Started With Apache Spark Structured Streaming Real-Time Mode</p>

Vidéo à la demande

Getting Started With Apache Spark Structured Streaming Real-Time Mode

<p>Découvrez Genie Code</p>

Vidéo à la demande

Découvrez Genie Code

<p>Lakeflow Spark Declarative Pipelines Démo d'avionique</p>

Vidéo à la demande

Lakeflow Spark Declarative Pipelines Démo d'avionique

Prêt à vous lancer ?

ESSAYER GRATUITEMENT DATABRICKS