Databricks Auto Loader (cloudfile)

Auto Loader elabora in modo incrementale ed efficiente i nuovi file di dati man mano che arrivano nel cloud storage senza alcuna configurazione aggiuntiva. In questa demo, ti mostreremo come funziona l'Auto Loader e copriremo le sue principali capacità:

• Ingestione incrementale ed efficiente in termini di costi (elimina la gestione di elenchi o stati non necessari)
• Operazione semplice e resistente: non è richiesta alcuna regolazione o codice manuale
• Scalabile a miliardi di file
• L'inferenza dello schema e l'evoluzione dello schema sono gestite automaticamente per la maggior parte dei formati (CSV, JSON, Avro, immagini, ecc.)

Per installare la demo, ottieni un spazio di lavoro Databricks gratuito ed esegui i seguenti due comandi in un notebook Python

%pip installa dbdemos

importa dbdemos
dbdemos.installa('auto-loader')

Dbdemos è una libreria Python che installa demo complete di Databricks nei tuoi spazi di lavoro. Dbdemos caricherà e avvierà quaderni, pipeline di Delta Live Tables, cluster, cruscotti Databricks SQL, modelli di magazzino... Vedi come usare dbdemos

Dbdemos è distribuito come un progetto GitHub.

Per ulteriori dettagli, si prega di consultare il GitHub file README.md e seguire la documentazione.
Dbdemos è fornito così com'è. Consulta la Licenza e Avviso per ulteriori informazioni.
Databricks non offre supporto ufficiale per dbdemos e gli asset associati.
Per qualsiasi problema, si prega di aprire un ticket e il team di demo darà un'occhiata nel miglior modo possibile.