Ir al contenido principal
Plataforma

Unifica tu productividad y tus datos de IA con Lakeflow Connect

Integra tus documentos, tickets, correos electrónicos y herramientas de IA en una única base regulada con Lakeflow Connect para potenciar los agentes de IA y los análisis de Genie

por Sonia Bendre y Giselle Goicochea

  • Las herramientas de productividad y colaboración contienen el conocimiento más valioso de tu empresa, pero históricamente estos datos han estado aislados en docenas de aplicaciones separadas, detrás de una integración de API personalizada para cada fuente.
  • Lakeflow Connect ofrece conectores nativos y totalmente administrados para Atlassian (Jira, Confluence), Microsoft (SharePoint, Outlook), Google Workspace (Drive, Gmail), GitHub y los principales proveedores de inteligencia artificial (OpenAI, Anthropic) con gobernanza unificada y sin infraestructura que administrar.
  • Como los datos estructurados y no estructurados llegan directamente a Unity Catalog, los equipos de datos pueden impulsar fácilmente bases de conocimiento empresariales, agentes de IA y paneles de productividad para desarrolladores sin necesidad de crear ni mantener canalizaciones de datos personalizadas.

Esta es la segunda publicación de nuestra serie sobre cómo Lakeflow Connect ofrece la ingesta de datos totalmente administrada a cada línea de negocio. Tras nuestro análisis detallado sobre la unificación de datos de marketing, esta publicación se centra en desbloquear el conocimiento empresarial atrapado en el conjunto de herramientas de productividad de tu organización. Exploraremos cómo los conectores nativos para wikis, herramientas de gestión de proyectos y modelos de base de IA brindan a tus agentes de IA descendientes el contexto empresarial completo que necesitan.

Una plataforma, cualquier fuente

Captura de pantalla del conector de Jira de Lakeflow Connect

Lakeflow Connect ofrece un conjunto completo de conectores nativos totalmente administrados para aplicaciones SaaS, bases de datos y fuentes de archivos que ingieren tus datos directamente en la Databricks Platform. Cada conector se puede configurar mediante una interfaz de usuario de señalar y hacer clic o una API sencilla. A partir de ahí, tus datos se ingieren de forma incremental como tablas gobernadas y administradas en Unity Catalog, sin necesidad de aprovisionar, administrar o escalar infraestructura.

Cualquier SaaS, base de datos o fuente de archivos en una sola plataforma

Priorizados según la demanda de los clientes, los conectores de ingesta de Lakeflow Connect abarcan todas las líneas de negocio, incluyendo Customer 360, Operaciones, Finanzas y Productividad, el conjunto de herramientas más cercano al trabajo diario.

Una plataforma, cada herramienta de productividad

El conjunto de herramientas de productividad de una empresa promedio es una amalgama de rastreadores de proyectos, wikis, almacenes de documentos, bandejas de entrada y herramientas de IA, cada uno de los cuales contiene solo una parte de cómo se realiza el trabajo. Históricamente, extraer esos datos ha requerido una combinación de pipelines personalizados que son lentos de construir y difíciles de mantener. El nivel de exigencia es lo suficientemente alto como para que los casos de uso más impactantes queden fuera de alcance, por ejemplo: agentes de IA impulsados por el conocimiento interno de tu empresa o visibilidad de análisis operacionales.

Lakeflow Connect resuelve esto al proporcionar conectores integrados para realizar la ingesta de forma fluida desde todo el conjunto de herramientas de productividad:

Datos de productividad dentro, análisis y IA gobernados fuera

Con esta amplia gama de conectores, Lakeflow Connect se convierte en el motor de ingesta que integra datos de productividad dispersos en una base gobernada, sin los cuellos de botella de integración que tradicionalmente ralentizan a los equipos.

Por ejemplo, Toyota Finance Australia, la filial financiera de uno de los fabricantes de automóviles más grandes del mundo, utiliza Lakeflow Connect para integrar sus datos de Jira en Databricks como un pipeline totalmente administrado y sin mantenimiento.

“Lakeflow Connect para Jira ha transformado la forma en que integramos y consumimos los datos de Jira dentro de nuestra plataforma de gestión de datos empresariales. Pasar a la experiencia totalmente administrada e impulsada por interfaz de usuario que ofrece Databricks proporcionó un pipeline fluido y sin mantenimiento que gestiona automáticamente la complejidad de la API y los cambios de esquema, a la vez que ofrece tablas Delta gobernadas y listas para análisis en el Databricks Lakehouse con un esfuerzo mínimo y la máxima confiabilidad”.- Charbel Khoury, Head of Data Office, Toyota Finance Australia Limited

De igual manera, Seguros SURA utiliza el conector de Monday.com para convertir tableros de tareas aislados en información gobernada y lista para la empresa.

"Usando el conector de Monday.com de Lakeflow Connect, podemos centralizar los datos de proyectos y operaciones que antes estaban dispersos en diferentes tableros dentro de Databricks. Gracias a la sincronización automática, ya no lidiamos con exportaciones manuales ni datos desactualizados. Al unir esta información con nuestros otros datos comerciales en la misma plataforma, podemos crear fácilmente análisis más completos, con la gobernanza y el control de acceso gestionados por Unity Catalog".- Juan David Munera, Head of Data and AI, Seguros Sura Mexico

VaxCare, una empresa de gestión de vacunas, opera la red de vacunación de atención primaria más grande de EE. UU. y utiliza el conector de Confluence de Lakeflow Connect para alimentar su base de conocimiento interno en Databricks y fundamentar un agente de IA en ella.

"El conector de Confluence de Lakeflow Connect nos ofrece una forma fluida de alimentar nuestra base de conocimiento interno en Databricks, lo que hace que esos datos sean buscables y procesables para nuestro chatbot hoy, y listos para impulsar futuras soluciones de IA a medida que las construyamos". - Yasaman Malone, VP of Optimization and AI, VaxCare

Contenido no estructurado, listo para IA desde el primer momento

Los agentes de IA pueden proporcionar respuestas instantáneas y fundamentadas a partir del conocimiento colectivo de tu empresa sin que los empleados tengan que buscar en wikis, unidades y bandejas de entrada. Pero un agente es tan bueno como los datos que lo respaldan, y la mayor parte de estos no están estructurados. Con Lakeflow Connect, esto no es un problema; nuestros conectores pueden almacenar contenido no estructurado como archivos, páginas y mensajes como tablas gobernadas en Unity Catalog. Los datos exactos y el formato en el que llegan varían según la fuente:

  • SharePoint: El conector de SharePoint incorpora los archivos no estructurados en sí (PDF, documentos de Word, presentaciones y archivos de imagen). Cada archivo no estructurado se almacena como una fila, con sus bytes sin procesar guardados en una columna content (como tipo BINARY o FILE), y los metadatos por archivo almacenados junto a ellos. Los archivos estructurados (archivos de Excel, CSV, etc.) también se pueden almacenar directamente como tablas Delta. 
  • Google Drive: El conector de Google Drive funciona de la misma manera para los archivos no estructurados, almacenando los bytes sin procesar de cada documento como una fila en una columna content. Los archivos estructurados (Google Sheets, CSV, etc.) también se pueden almacenar directamente como tablas Delta. 
  • Confluence: El conector de Confluence incorpora el contenido de cada página y publicación de blog como tipo STRUCT en un campo body de las tablas pages y blogposts. 
  • Outlook: El conector de Outlook almacena el cuerpo del correo electrónico en una columna full_body_content como una cadena de texto (ya sea HTML o texto plano), y almacena los archivos adjuntos en una columna attachments como tipo BINARY. Ambos se encuentran en la tabla email_messages.
  • Gmail: El conector de Gmail importa el cuerpo completo del mensaje como una cadena de texto, almacenada en la tabla messages. También recopila una referencia a cada archivo adjunto como un attachmentId.
  • GitHub: El conector de GitHub importa los archivos de texto del repositorio (código fuente, Markdown y configuración), almacenados en la columna content de la tabla repo_contents.

Sea cual sea la fuente, el contenido llega a Unity Catalog como una tabla gobernada, donde puedes empezar a transformarlo para casos de uso de IA posteriores.

  • El texto que ingresa (como páginas de Confluence, cuerpos de correo electrónico y archivos fuente de GitHub) está listo para fragmentarse e integrarse en vectores tras una ligera limpieza. 
  • Por otro lado, los archivos de documentos que llegan como bytes sin procesar (como los archivos de SharePoint y Google Drive o los archivos adjuntos de Outlook) se convierten primero en texto con ai_parse_document, la inteligencia de documentos integrada de Databricks.

De cualquier manera, obtendrás texto que puedes indexar para la recuperación y usar tras un agente. Para ver un análisis más detallado del procesamiento de documentos, mira esta sesión bajo demanda, Intelligent Document Processing with Lakeflow; y para obtener más información sobre cómo empezar, lee la guía de RAG posterior.

M3 Accounting, un proveedor líder de software de hostelería, utiliza los conectores de GitHub y SharePoint de Lakeflow Connect para unificar su documentación de ingeniería y de producto en Databricks.

"Pusimos en marcha el conector de GitHub de Lakeflow Connect en cuestión de minutos. Nos ahorra aproximadamente una hora a la semana al combinar automáticamente nuestros datos de GitHub con nuestros otros datos de operaciones de ingeniería, lo que nos brinda una imagen completa de la actividad de los desarrolladores sobre la cual podemos actuar. Apuntamos el conector de SharePoint de Lakeflow Connect a nuestra biblioteca de documentación de productos y logramos que nuestro asistente de conocimiento interno extrajera contenido actualizado en vivo en una semana. Sin rastreadores personalizados, sin scripts de sincronización de archivos, solo un conector y una canalización." - Ross Serven, vicepresidente de Datos e IA, M3 Accounting

Gobierna lo que gastas en IA con Lakeflow Connect

A medida que los agentes de IA y las herramientas generativas se extienden por los equipos, también lo hacen las preguntas sobre los modelos que los impulsan: ¿cuánto estamos gastando, quién usa qué, cumple con las normas? Para ayudar a responder a estas preguntas, Lakeflow Connect ofrece conectores para los principales proveedores de modelos base:

  • OpenAI: El conector de OpenAI trae el uso, los costos, las claves de API, los proyectos, los usuarios y los registros de auditoría, para que puedas atribuir el gasto de IA por equipo y realizar un seguimiento de la adopción.
  • Anthropic: El conector de Anthropic trae los registros de auditoría, los usuarios y roles de tu organización, y el contenido de los chats y mensajes de claude.ai, para que puedas gobernar cómo se usa la herramienta.

En concreto, esto permite obtener una vista única y unificada de cómo evolucionan el uso y la adopción de la IA en tu organización, para que puedas medir e informar el ROI de tus inversiones en IA a las partes interesadas.

Construye una imagen completa de tus datos de Atlassian

La profundidad de cobertura del ecosistema de Lakeflow Connect también se extiende a Atlassian, una de las suites más utilizadas en cualquier organización de ingeniería o producto:

  • Jira: El conector de Jira importa incidencias, comentarios, sprints, paneles y campos personalizados, para que puedas realizar un seguimiento de las entregas y crear paneles en todos los proyectos.
  • Confluence: El conector de Confluence importa el texto completo de las páginas y publicaciones de blog, junto con sus espacios, etiquetas y archivos adjuntos, para que el conocimiento escrito de tu equipo esté listo para buscar y analizar.

Con ambos conectores, obtienes una imagen completa de tus datos de Atlassian, la entrega y la documentación que la rodea, lado a lado. A partir de ahí, puedes realizar un seguimiento de los lanzamientos, los cuellos de botella y los tiempos de resolución en todos los proyectos. También puedes crear paneles de AI/BI y preguntarle a Genie sobre cualquiera de ellos en lenguaje natural.

Por ejemplo, Digicert, un líder global en seguridad digital, utiliza el conector de Confluence de Lakeflow Connect para potenciar de forma fiable sus asistentes de conocimiento de IA internos sin los costes generales de las canalizaciones personalizadas.

"El conector de Confluence de Lakeflow Connect ha sido de gran ayuda para mantener nuestros asistentes de conocimiento en Databricks continuamente sincronizados con nuestra documentación más reciente. Nos ofrece una forma sencilla y fiable de traer datos de Confluence a Databricks sin el coste general de crear y mantener canalizaciones personalizadas. Esto ha sido especialmente valioso para nuestros bots de productos, ayudándoles a mantenerse al día y a proporcionar a nuestros equipos un conocimiento preciso y actualizado." - Nikita Raje, directora sénior de Ingeniería de Datos, DigiCert

Otro cliente, Orizon, una empresa brasileña de tecnología sanitaria, utiliza el conector de Jira de Lakeflow Connect para alimentar sus paneles de liderazgo.

"Con el conector de Jira de Lakeflow Connect, trajimos más de un millón de tickets de 168 proyectos a Databricks, todos sincronizados diariamente con un 100% de éxito. A partir de estos datos, construimos paneles de AI/BI que alimentan automáticamente la cabina de nuestro comité directivo. Genie ha sido fundamental: hacemos preguntas en lenguaje natural y ofrece respuestas al instante." - Gustavo Lima, gerente de Ingeniería de Datos, Orizon

Para ver una guía paso a paso de configuración y ajuste del conector de Jira, consulta Unify Your Engineering Data: Jira Ingestion Best Practices. 

Una base, cualquier pregunta de análisis o IA

Dado que cada conector deposita sus datos como tablas Delta gobernadas en Unity Catalog, la productividad y los datos de IA que ingieres pasan a formar parte de la misma base que el resto de los datos de tu empresa. A partir de ahí, puedes consultarlos directamente en Databricks Lakehouse junto con tus otras fuentes, hacerles preguntas en lenguaje natural con Genie One y fundamentar los agentes que creas con Agent Bricks en el conocimiento actual de la empresa.

Y como la gobernanza, el linaje y el control de acceso provienen de Unity Catalog, el acceso se mantiene coherente independientemente del equipo o la herramienta de donde procedan originalmente los datos.

TRegs, una plataforma de tecnología financiera para tesorería, riesgos y normativas, ya está construyendo sobre esa base.

"Necesitábamos ver todos nuestros costos y proyecciones en un solo lugar. Al traer nuestros datos de Monday.com y QuickBooks a Databricks con Lakeflow Connect, ahora podemos potenciar nuestros paneles de AI/BI de Genie para obtener una visión completa de 360 grados de nuestros gastos actuales y proyectados, lo que nos hace la vida muy fácil." - Smriti Raj, presidenta y directora de tecnología (CTO), TRegs

Lakeflow Connect está implementando activamente nuevos conectores en todas las líneas de negocio, ¡con compatibilidad para aún más conectores próximamente! Prueba Lakeflow Connect gratis ahora.

No te pierdas la próxima publicación de esta serie de blogs sobre Lakeflow Connect para seguir aprendiendo a incorporar todos tus datos empresariales en Databricks y dar a tus agentes de IA el contexto completo que necesitan.

Preguntas frecuentes

¿A qué herramientas de productividad se conecta Lakeflow Connect?
Lakeflow Connect cuenta con conectores gestionados para Jira, Confluence, Monday.com, Smartsheet, Aha!, GitHub, Notion, Glean, SharePoint, Google Drive, Outlook y Gmail. También dispone de conectores para OpenAI y Anthropic. Cada conector se puede configurar en una interfaz de usuario de señalar y hacer clic o mediante una API. Consulta la lista completa de conectores SaaS de Lakeflow Connect. 

¿Puede Lakeflow Connect ingerir archivos no estructurados y correos electrónicos?
Sí. Los conectores de SharePoint y Google Drive guardan cada archivo no estructurado como una fila, con sus bytes sin procesar en una columna content. El conector de Outlook incorpora los cuerpos de los correos electrónicos como texto y el conector de GitHub incorpora los archivos de texto del repositorio. Todo se almacena como una tabla gobernada en Unity Catalog.

¿Cómo preparo el contenido ingerido para un agente de IA?
El texto, como las páginas de Confluence, los cuerpos de correo y los archivos fuente de GitHub, está listo para fragmentarse e integrarse después de una limpieza ligera. Los archivos que llegan como bytes sin procesar primero se convierten en texto con ai_parse_document. Luego, puedes indexar el texto para su recuperación y usarlo para fundamentar un agente. Para empezar, mira esta sesión bajo demanda, Procesamiento inteligente de documentos con Lakeflow, o lee la guía de RAG posterior.

¿Qué datos traen los conectores de OpenAI y Anthropic?
El conector de OpenAI trae uso, costos, claves de API, proyectos, usuarios y registros de auditoría, para que puedas atribuir el gasto en IA por equipo. El conector de Anthropic trae registros de auditoría, usuarios y roles, además del contenido de los chats y mensajes de claude.ai. Juntos te ofrecen una vista única de cómo evolucionan el uso y la adopción de la IA.

¿Qué puedo construir una vez que los datos de Jira y Confluence estén en Databricks?
Puedes realizar un seguimiento de los lanzamientos, los cuellos de botella y los tiempos de resolución en todos los proyectos, y crear paneles de control de AI/BI con los resultados. Orizon, por ejemplo, trajo más de un millón de tickets de Jira de 168 proyectos a Databricks para alimentar sus paneles de control de liderazgo. Las páginas de Confluence también pueden fundamentar asistentes de conocimiento interno.

(Esta entrada del blog ha sido traducida utilizando herramientas basadas en inteligencia artificial) Publicación original

Etiquetas relacionadas:

Lakeflow

Recibe las últimas publicaciones en tu bandeja de entrada

Suscríbete a nuestro blog y recibe las últimas publicaciones directamente en tu bandeja de entrada.