Apache Spark Structured Streaming in tempo reale Mode - Demo sulla latenza

In questo walkthrough tecnico, Frank Munz utilizza una demo di Neil Patel per dimostrare i vantaggi in termini di latenza derivanti dal passaggio da Micro-batch Mode (MBM) a in tempo reale Mode (RTM) in Apache Spark^TM Structured Streaming. Dopo aver implementato un Declarative Automation Bundle (DAB) per configurare l'ambiente, Frank stabilisce una baseline MBM, quindi aggiorna il trigger a RTM e mostra il calo della latenza. Il video si conclude con un'analisi approfondita del codice sottostante.