Databricks Auto Loader (Cloudfile)

Auto Loader verarbeitet neue Datenfiles, die in der Cloud-Speicherung ankommen, inkrementell und effizient, ohne zusätzliche Einrichtung. In dieser Demo zeigen wir Ihnen, wie der Auto Loader funktioniert und gehen auf seine Hauptfunktionen ein:

• Inkrementelle und kosteneffiziente Datenaufnahme (unnötige Auflistung oder Statusverwaltung wird entfernt)
• Einfacher und widerstandsfähiger Betrieb: Keine Abstimmung oder manueller Code erforderlich
• Skalierbar auf Milliarden von Dateien
• Die Schema-Inferenz und Schema-Evolution werden für die meisten Formate (CSV, JSON, Avro, Bilder, usw.) direkt unterstützt.

Um die Demo zu installieren, besorgen Sie sich eine kostenlose Databricks-Arbeitsumgebung und führen Sie die folgenden zwei Befehle in einem Python-Notizbuch aus

%pip installiere dbdemos

importiere dbdemos
dbdemos.installiere('auto-loader')

Dbdemos ist eine Python-Bibliothek, die vollständige Databricks-Demos in Ihren Arbeitsbereichen installiert. Dbdemos lädt und startet Notebooks, Delta Live Tables Pipelines, Cluster, Databricks SQL Dashboards, Warehouse-Modelle ... Sehen Sie wie man dbdemos verwendet

Dbdemos wird als ein GitHub-Projekt verteilt.

Für weitere Details, bitte das GitHub README.md Datei ansehen und die Dokumentation befolgen.
Dbdemos wird so wie es ist bereitgestellt. Siehe die Lizenz und Hinweis für weitere Informationen.
Databricks bietet keinen offiziellen Support für dbdemos und die zugehörigen Assets.
Bei Problemen, bitte ein Ticket öffnen und das Demo-Team wird sich nach bestem Bemühen darum kümmern.