Apresentando Suporte Serverless para Perfis de Instância AWS

Apresentando Suporte Serverless para Perfis de Instância AWS: Acesso Uniforme aos Dados

Na Databricks, nos esforçamos continuamente para simplificar o acesso aos dados e impulsionar a inovação em nossa plataforma. Hoje, estamos animados para anunciar o suporte serverless para perfis de instância AWS. Este marco permite acesso contínuo aos dados armazenados nos serviços de nuvem AWS para clientes que utilizam computação serverless para notebooks, trabalhos e pipelines Delta Live Tables (DLT).

Por que isso é importante

Tradicionalmente, configurar o acesso a dados armazenados na AWS exigia o gerenciamento direto de credenciais ou a incorporação delas em configurações, o que introduzia complexidades operacionais e riscos de segurança. Com essa atualização, o cálculo serverless herda a mesma configuração de acesso a dados que os armazéns SQL serverless, incluindo:

• Perfis de Instância AWS: Uma maneira segura e escalável de acessar dados na Amazon S3 sem incorporar credenciais.
• Configurações Spark: Configurações Spark em toda a workspace para simplificar o acesso a Hive Metastores externos e integrações de terceiros.

Agora é mais fácil do que nunca unificar o acesso seguro em Jobs sem servidor, Notebooks, pipelines DLT e Armazéns SQL, especialmente para clientes que ainda estão migrando seus dados para o Catálogo Unity.

Principais benefícios

1. Adoção mais fácil de Computação Serverless: Agora, os clientes podem usar com confiança a computação serverless para acessar dados gerenciados fora do Catálogo Unity ou armazenados em locais arbitrários da AWS, removendo a dependência de pontos de montagem DBFS ou credenciais incorporadas.
2. Integração Perfeita com Configurações Existentes: Clusters de computação serverless herdam automaticamente perfis de instância e configurações Spark já configurados para SQL Warehouses, simplificando a transição para os administradores.
3. Segurança e Governança Aprimoradas: Esta atualização suporta um robusto controle de acesso baseado em IAM, alinhando-se com modelos de governança empresarial e requisitos de conformidade.
4. Experiência do Usuário Simplificada: Os desenvolvedores podem se concentrar na construção e implantação de cargas de trabalho sem se preocupar com configurações de acesso de baixo nível ou gerenciamento de credenciais.

O que há de novo na experiência do usuário?

Os administradores de espaço de trabalho podem configurar o acesso aos dados para computação serverless diretamente na familiar interface de gerenciamento de computação. Veja como funciona:

• Configurações de SQL Warehouses Existentes: Se sua workspace já usa um perfil de instância ou configurações Spark para SQL Warehouses, os clusters de computação serverless herdarão essas configurações automaticamente - não é necessário nenhum setup adicional.
• Configurando Novas Configurações: Os administradores podem facilmente especificar perfis de instância e configurações opcionais do Spark para habilitar o acesso computacional sem servidor aos dados do Catálogo não-Unity. Essas configurações se aplicam uniformemente entre os armazéns SQL e o cálculo serverless.

Impacto nas Equipes de Dados

Essa capacidade desbloqueia novas possibilidades para clientes de diversas indústrias:

• Analistas de Dados e Engenheiros: Acesse sem problemas os dados do Hive Metastore legado, permitindo a exploração rápida de dados e a execução de trabalhos sem esperar pela migração do Catálogo Unity.
• Administradores e Equipes de Segurança: Aproveite os perfis de instância AWS para impor o acesso de menor privilégio, minimizando o risco de escalada de privilégio inadvertida.
• Desenvolvedores: Integre-se com ferramentas de terceiros e serviços de dados sem esforço, graças ao suporte consistente à configuração Spark.

Comece hoje

O suporte sem servidor para perfis de instância AWS está disponível agora no Databricks. Para instruções detalhadas de configuração, visite nossa documentação.

 

(This blog post has been translated using AI-powered tools) Original Post