Ir para o conteúdo principal
Plataforma

Criando inteligência em tempo real: o Databricks AI Search agora oferece suporte a Streaming Tables, Materialized Views e tabelas gerenciadas usando Iceberg

por Yu-Ju Huang, Ankit Vij, Vadim Antonov e Dima Kotlyarov

  • O AI Search agora oferece suporte nativo a três novas fontes de tabela, além das tabelas Delta: Streaming Tables, Materialized Views e tabelas gerenciadas usando Iceberg v3+.
  • Use o AI Search para dar suporte a inteligência em tempo real, experiências personalizadas e aplicações de IA multiengine.
  • Use o mesmo fluxo de trabalho do AI Search em diferentes fontes de dados, a partir da interface ou da API, sem criar pipelines de sincronização separados.

O AI Search agora oferece suporte nativo a Streaming Tables, Materialized Views e tabelas gerenciadas usando Iceberg v3+ além das tabelas Delta. Você pode trazer eventos em tempo real, estado personalizado continuamente atualizado e dados em formato aberto diretamente para suas aplicações de AI Search, reduzindo o esforço de criar e gerenciar pipelines separados para converter e sincronizar essas fontes de dados.

Três formatos de tabela, um mundo mais amplo de aplicações de busca

Streaming Tables, Materialized Views e Iceberg gerenciado representam formas diferentes de trabalhar com dados, e cada uma abre novas possibilidades para aplicações de IA.

Fonte de dadosIdeal paraO que ela possibilita
Tabelas Delta (existentes)Cargas de trabalho de dados e analíticasAmpla gama de análises e aplicações de IA
Streaming TablesEventos que chegam continuamenteDetecção de fraudes, monitoramento de segurança e análise de IoT em tempo real
Materialized ViewsDados personalizados agregados e combinadosPersonalização, busca com reconhecimento de sessão, assistência por agentes
Tabelas gerenciadas usando IcebergDados em formato aberto entre enginesAgentes multiengine, busca de conhecimento unificada e inteligência de dados em formato aberto

Streaming Tables: impulsionando a inteligência em tempo real

Dados em mudança contínua, como novos anúncios, inventário, disponibilidade e atividade do usuário, podem fluir para uma Streaming Table somente de anexos (append-only), com o AI Search indexando novos registros à medida que chegam e mantendo o índice de busca atualizado. Essa atualização permite aplicações em que os dados mais recentes podem moldar diretamente a experiência de busca: ajudando os usuários a descobrir restaurantes recém-disponíveis por meio de uma barra de pesquisa ou gerando recomendações em tempo real com base em tendências recentes.

Materialized Views: enriquecendo a busca com contexto personalizado 

As Materialized Views podem agregar dados, filtrar registros e combinar dados de várias fontes para criar um estado personalizado. À medida que os dados subjacentes mudam, a visualização é mantida incrementalmente e o AI Search propaga essas alterações para o índice, permitindo experiências de busca personalizadas, como recomendações com reconhecimento de sessão, descoberta de produtos e conteúdo com base em atividades recentes ou resultados adaptados aos interesses e preferências em evolução do usuário.

Tabelas gerenciadas usando Iceberg: traga dados em formato aberto para aplicações de busca

As tabelas Iceberg gerenciadas podem servir como fontes do AI Search diretamente, sem conversão ou migração para outro formato de tabela, disponibilizando dados em formato aberto para índices de busca e outras aplicações de IA. O formato aberto permite aplicações de IA que funcionam em ambientes de dados existentes: busca em catálogos de produtos gerenciados por diferentes sistemas, unificação de dados de negócios ou de clientes armazenados em tabelas Iceberg gerenciadas, ou criação de experiências de busca em conjuntos de dados grandes e distribuídos sem mover os dados subjacentes.

Tornando a busca nativa para seus dados: conecte seus dados diretamente ao AI Search

Antes do suporte nativo, os clientes precisavam criar uma representação Delta separada de Streaming Tables, Materialized Views ou tabelas Iceberg gerenciadas e criar pipelines para mantê-la sincronizada com a fonte. Isso adicionava uma camada de dados extra, lógica de atualização personalizada e esforço operacional contínuo. 

Agora, o AI Search se conecta diretamente a essas fontes. Crie um índice a partir da sua fonte e sincronize-o quando necessário — o AI Search os propaga diretamente para o índice, eliminando a tabela Delta intermediária e o pipeline de sincronização personalizado. Seus dados permanecem conectados à busca à medida que evoluem, com a plataforma cuidando da infraestrutura nos bastidores.

Comece a criar hoje: um único fluxo de trabalho para mais fontes de dados

Independentemente de você usar a interface ou a API, criar um índice do AI Search segue o mesmo fluxo de trabalho usado para fontes de tabelas Delta existentes: crie um índice Delta Sync e aponte-o para sua tabela de origem. O mesmo fluxo de trabalho agora se estende a Streaming Tables, Materialized Views e tabelas Iceberg — nenhum novo fluxo de trabalho para aprender.

Tudo pronto para criar aplicações de IA com seus dados? Comece criando um índice do AI Search diretamente a partir de suas Streaming Tables, Materialized Views ou tabelas Iceberg gerenciadas — sem a necessidade de pipelines de dados adicionais. Explore a documentação do AI Search.

(Esta publicação no blog foi traduzida utilizando ferramentas baseadas em inteligência artificial) Publicação original

Tags relacionadas:

Anúncios

Receba os posts mais recentes na sua caixa de entrada

Assine nosso blog e receba os posts mais recentes diretamente na sua caixa de entrada.