Ingestão

Com o Databricks Auto Loader, você pode ingerir de forma gradual e eficiente novos arquivos de dados em batch e streaming em tempo real em suas tabelas do Delta Lake à medida que chegam. Assim, elas sempre contêm os dados mais abrangentes e atualizados disponíveis. O Auto Loader é uma ferramenta simples e flexível que pode ser executada continuamente ou no modo "triggerOnce" para processar dados em lotes. Os usuários do SQL usam o comando simples “COPY INTO” para trazer automaticamente novos dados para suas tabelas o Delta Lake. Não há necessidade de rastrear arquivos que já foram processados.