Apache Spark Structured Streaming en modo de tiempo real: demostración de latencia

En este recorrido técnico, Frank Munz usa una demostración de Neil Patel para demostrar las ventajas en la latencia al pasar del Modo de microlotes (MBM) al Modo de tiempo real (RTM) en Apache Spark^TM Structured Streaming. Después de implementar un paquete de automatización declarativa (DAB) para configurar el entorno, Frank establece una línea de base de MBM, luego actualiza el activador a RTM y muestra la disminución de la latencia. El video cierra con un análisis a fondo del código subyacente.