Ingestion

Avec Databricks Auto Loader, vous pouvez ingérer progressivement et efficacement de nouveaux fichiers de données batch et streaming en temps réel dans vos tables Delta Lake dès leur arrivée. Ainsi, ils contiennent toujours les données disponibles les plus complètes et les plus récentes. Auto Loader est un outil simple et flexible qui peut être exécuté en continu, ou en mode "triggerOnce" pour traiter les données par lots. Les utilisateurs de SQL n'ont qu'à utiliser la commande « COPY INTO » pour intégrer automatiquement de nouvelles données dans leurs tables Delta Lake. Pas besoin d'effectuer un suivi des fichiers déjà traités.