Ir al contenido principal
Plataforma

Construyendo inteligencia en vivo: Databricks AI Search ahora admite Streaming Tables, Materialized Views y Managed tables usando Iceberg

por Yu-Ju Huang, Ankit Vij, Vadim Antonov y Dima Kotlyarov

  • AI Search es compatible de forma nativa con tres nuevas fuentes de datos además de las tablas Delta: Streaming Tables, Materialized Views y Managed tables usando Iceberg v3+.
  • Usa AI Search para respaldar inteligencia en tiempo real, experiencias personalizadas y aplicaciones de IA multi-motor.
  • Usa el mismo flujo de trabajo de AI Search en todas las fuentes de datos, desde la interfaz de usuario o la API, sin construir pipelines de sincronización separados.

AI Search ahora es compatible de forma nativa con Streaming Tables, Materialized Views y Managed tables usando Iceberg v3+ además de las tablas Delta. Puedes integrar eventos en vivo, estados personalizados actualizados continuamente y datos en formato abierto directamente en tus aplicaciones de AI Search, reduciendo el trabajo de construir y gestionar pipelines separados para convertir y sincronizar estas fuentes de datos.

Tres formatos de tabla, un mundo más amplio de aplicaciones de búsqueda

Streaming Tables, Materialized Views y Managed Iceberg representan formas distintas de trabajar con datos, y cada una abre nuevas posibilidades para aplicaciones de IA.

Fuente de datosIdeal paraQué permite
Tablas Delta (existentes)Cargas de trabajo analíticas y de datosAmplia gama de aplicaciones de análisis e IA
Streaming TablesEventos que llegan continuamenteDetección de fraude, monitoreo de seguridad y análisis de IoT en tiempo real
Materialized ViewsDatos personalizados agregados y unidosPersonalización, búsqueda consciente de la sesión, asistencia por agentes
Managed tables usando IcebergDatos en formato abierto entre motoresAgentes multi-motor, búsqueda de conocimiento unificada, inteligencia de datos en formato abierto

Streaming Tables: potenciando la inteligencia en tiempo real

Datos que cambian continuamente, como nuevos listados, inventario, disponibilidad y actividad de usuarios, pueden fluir hacia una Streaming Table de solo adición. AI Search indexa los nuevos registros a medida que llegan y mantiene el índice de búsqueda actualizado. Esta frescura permite aplicaciones donde los datos más recientes pueden dar forma directa a la experiencia de búsqueda: ayudar a los usuarios a descubrir restaurantes recién disponibles a través de una barra de búsqueda, o generar recomendaciones en tiempo real basadas en tendencias recientes.

Materialized Views: enriqueciendo la búsqueda con contexto personalizado 

Las Materialized Views pueden agregar eventos, filtrar registros y unir datos de múltiples fuentes para crear un estado personalizado. A medida que cambian los datos subyacentes, la vista se actualiza de manera incremental y AI Search propaga esos cambios al índice, permitiendo experiencias de búsqueda personalizadas como recomendaciones conscientes de la sesión, descubrimiento de productos y contenido basado en actividad reciente, o adaptar los resultados a los intereses y preferencias cambiantes del usuario.

Managed tables usando Iceberg: lleva datos en formato abierto a las aplicaciones de búsqueda

Las tablas Managed Iceberg pueden servir como fuentes de AI Search directamente, sin conversión o migración a otro formato de tabla, haciendo que los datos en formato abierto estén disponibles para los índices de búsqueda y otras aplicaciones de IA. El formato abierto permite aplicaciones de IA que funcionan en entornos de datos existentes: buscar en catálogos de productos gestionados por diferentes sistemas, unificar datos de clientes o de negocios almacenados en tablas Managed Iceberg, o construir experiencias de búsqueda sobre conjuntos de datos grandes y distribuidos sin mover los datos subyacentes.

Haciendo que la búsqueda sea nativa de tus datos: conecta tus datos directamente a AI Search

Antes del soporte nativo, los clientes tenían que crear una representación Delta separada de Streaming Tables, Materialized Views o tablas Managed Iceberg y construir pipelines para mantenerla sincronizada con la fuente. Esto añadía una capa de datos adicional, lógica de actualización personalizada y trabajo operativo continuo. 

Ahora, AI Search se conecta directamente a estas fuentes. Crea un índice a partir de tu fuente y sincronízalo cuando sea necesario: AI Search los propaga directamente al índice, eliminando la tabla Delta intermedia y el pipeline de sincronización personalizado. Tus datos permanecen conectados a la búsqueda a medida que evolucionan, y la plataforma se encarga de la parte técnica tras bambalinas.

Empieza a construir hoy: un flujo de trabajo, en más fuentes de datos

Ya sea que uses la interfaz de usuario o la API, construir un índice de AI Search sigue el mismo flujo de trabajo utilizado para las fuentes de tablas Delta existentes: crea un índice Delta Sync y apunta a tu tabla fuente. El mismo flujo de trabajo ahora se extiende a Streaming Tables, Materialized Views y tablas Iceberg; sin nuevos flujos de trabajo que aprender.

¿Listo para construir aplicaciones de IA con tus datos? Comienza creando un índice de AI Search directamente desde tus Streaming Tables, Materialized Views o tablas Managed Iceberg, sin necesidad de pipelines de datos adicionales. Explora la documentación de AI Search.

(Esta entrada del blog ha sido traducida utilizando herramientas basadas en inteligencia artificial) Publicación original

Etiquetas relacionadas:

Anuncios

Recibe las últimas publicaciones en tu bandeja de entrada

Suscríbete a nuestro blog y recibe las últimas publicaciones directamente en tu bandeja de entrada.