Establece una única fuente de verdad para todos los datos y habilita todas las cargas de trabajo, desde IA hasta BI, en la Plataforma de Inteligencia de Datos de Databricks
por Michael Lumb
Hoy, nos complace anunciar el lanzamiento de las Soluciones de Migración de Data Warehouse de Brickbuilder. Esta es una expansión del Programa Brickbuilder, que agrupa la experiencia y el conocimiento del ecosistema de partners de Databricks junto con código precompilado, marcos modulares y servicios personalizados para ayudar a las organizaciones a desbloquear todo el potencial de la Plataforma de Inteligencia de Datos de Databricks. A medida que las organizaciones dependen cada vez más de los datos para aumentar la productividad e impulsar la innovación, migrar a Databricks les permite lograr una gestión, utilización y acceso efectivos a los datos y la IA al consolidar las mejores características de los data lakes y los data warehouses en una sola plataforma.
El Programa Brickbuilder, compuesto por soluciones y aceleradores de partners, comenzó centrándose en soluciones de industria y migración, y rápidamente se expandió para incluir aceleradores de lakehouse y Unity Catalog. Cada solución y acelerador de partner ha sido revisado a fondo y ha demostrado una y otra vez ayudar a las organizaciones a beneficiarse de la simplicidad, la gobernanza unificada y la apertura de la arquitectura lakehouse de Databricks para abordar casos de uso de negocio clave. En particular, las Soluciones de Migración de Data Warehouse de Brickbuilder incorporan Databricks SQL para ayudar a las empresas a obtener información impactante al traducir datos brutos en datos accionables, Delta Lake UniForm como capa de almacenamiento abierta para mantener los datos en un solo lugar, y Unity Catalog para proporcionar seguridad y gobernanza.
Veamos más a fondo nuestras soluciones de migración de data warehouse de partners, diseñadas para mejorar las capacidades de data warehousing utilizando el poder de Unity Catalog y Databricks SQL (DBSQL). Todas estas soluciones de partners operan en una arquitectura lakehouse multicloud para ofrecer un rendimiento de clase mundial y la economía de los data lakes. Los partners de migración de data warehouse incluyen Accenture, Avanade, Capgemini, Celebal Technologies, Cognizant, Deloitte, EPAM, Impetus, Infosys, Koantek, Lovelytics, LTIMindtree, Nousot, Onix, Slalom, Tredence y Wipro.

El éxito en las iniciativas de datos e IA basadas en lakehouse depende de una arquitectura de datos simplificada, calidad y gobernanza de datos, y escalabilidad y rendimiento. Estos pilares proporcionan colectivamente la base sobre la cual las organizaciones construyen su estrategia moderna de gestión y análisis de datos.
Databricks SQL, el data warehouse inteligente, construido con inteligencia de datos, agiliza la transformación, exploración y análisis de datos basados en SQL, al tiempo que atiende a usuarios de diversos orígenes técnicos. Desde analistas de BI y arquitectos de datos hasta ingenieros de análisis, su interfaz SQL intuitiva facilita las consultas y las operaciones de datos complejas sin necesidad de programación especializada. Además, con funciones como AI/BI Genie y Dashboards, los analistas y usuarios de negocio pueden utilizar el lenguaje natural para obtener información de sus datos. Este acceso ampliado a los datos fomenta una cultura centrada en la organización, capacitando a más equipos para basar sus decisiones en información de datos fácilmente obtenida.
Finalmente, Unity Catalog permite a Databricks SQL incorporar funciones avanzadas de gobernanza de datos, seguridad y cumplimiento, capacitando a las organizaciones para mantener la calidad de los datos, implementar restricciones de acceso, supervisar las actividades de datos, proteger los datos sensibles y cumplir con los estándares regulatorios.
Los beneficios de Databricks SQL incluyen:
Las Soluciones de Migración de Data Warehouse de Brickbuilder se desarrollaron para ayudarle a migrar sus datos a la Plataforma de Inteligencia de Datos de Databricks y aprovechar Databricks SQL y la arquitectura lakehouse para unificar datos, análisis e IA, al tiempo que se reduce el costo y la complejidad de administrar un data warehouse independiente y heredado. Todas las Soluciones de Data Warehouse de partners enumeradas a continuación han ayudado a los clientes a navegar su migración de data warehouse con resultados probados:
La Migración de Datos en la Nube de Accenture le ayuda a navegar cualquier complejidad, desde la creación de zonas de aterrizaje en el Cloud Continuum hasta la regulación de la soberanía de los datos. Accenture trabaja con usted para determinar la estrategia de nube, el modelo operativo, la hoja de ruta y los socios de ecosistema adicionales adecuados. Luego, le ayudan a acelerar la migración y modernización a la nube para que sea segura, rentable y ágil. El marco integral de migración a la nube de Accenture aporta capacidades industrializadas junto con herramientas, métodos y automatización preconfigurados y exclusivos específicos de la industria en todos los modelos de nube y métodos de entrega probados.
Avanade comprende la mayoría de las organizaciones que enfrentan desafíos para administrar patrimonios de datos cuya complejidad está fuera de control. Con una huella de datos desarticulada en silos a través de múltiples formatos, sistemas y formatos, no puede desbloquear las perspectivas que impulsan decisiones confiables basadas en datos sin una migración fluida a Databricks. El programa de aceleración Avanade Legacy System Migration puede ayudar a unificar, simplificar y acelerar la migración en más del 60 por ciento en comparación con los métodos típicos semiautomatizados o aislados. Al aprovechar el aprendizaje automático y la IA Generativa, puede acelerar el poder de Unity Catalog y DBSQL, permitiendo a los usuarios comerciales y técnicos superar los desafíos operativos de los datos atrapados en plataformas heredadas. Con más de 1000 proyectos de clientes en su haber, Avanade puede ayudarlo a obtener valor más rápido de sus datos en el almacén de datos inteligente y comenzar su programa estratégico de migración de datos en tan solo 3 semanas.
La Metodología de Migración de Datos (DMM) de Capgemini utiliza una fábrica de migración de datos industrializada basada en metadatos para ayudarlo a optimizar y automatizar la migración de datos a la nube y Databricks. DMM garantiza que la arquitectura de la nube y los patrones de migración estén alineados con sus ambiciones en la nube, mientras que los métodos industrializados, las herramientas y la automatización impulsan una migración de alta calidad y rentable. Se integra perfectamente con su plataforma existente sin software ni marcos adicionales. Además, Capgemini lo ayuda a compensar los costos de la evaluación para que pueda impulsar su viaje a través de una hoja de ruta integral, que aprovecha la herramienta de evaluación eAPM de Capgemini, la mejor de su clase, impulsada por GenAI para acelerar la migración de esquemas, datos y código. Esto proporciona una visión incomparable de su cartera de TI, aborda las brechas en su preparación y aprovecha los servicios basados en la nube para modernizar su panorama para que pueda ahorrar hasta un 25% una vez en producción.
Celebal Technologies está liderando la modernización de datos al ofrecer su experiencia para ayudar a las empresas a migrar a la Plataforma de Inteligencia de Datos de Databricks. Su conjunto de herramientas y aceleradores aborda desafíos críticos de EDW y ETL como silos de datos, visibilidad limitada y problemas de escalabilidad que típicamente plagaron los sistemas heredados. Su Utilidad de Migración patentada automatiza hasta el 70% de la carga de trabajo de migración, permitiendo la conversión de scripts en solo unos días. Con su Herramienta de Análisis Avanzado, proporcionan información profunda sobre los esquemas de origen, optimizando la fase de descubrimiento y garantizando una planificación de migración meticulosa. Los clientes que utilizan los servicios de Celebal Technologies han experimentado hasta un 50% de reducción en los plazos de migración, una disminución del 30-35% en el costo total de propiedad y una notable aceleración del 70% en el tiempo de obtención de información. Celebal Technologies no solo facilita transiciones fluidas, sino que también optimiza el procesamiento de datos e implementa marcos de gobernanza sólidos para posicionar a las organizaciones para la innovación futura en la era nativa de la nube.

Las organizaciones operan grandes conjuntos de aplicaciones y bases de datos que desean migrar a plataformas en la nube, pero a menudo luchan por identificar herramientas de migración que habiliten sus casos de negocio de manera confiable y rentable. La Fábrica de Migración a la Nube de Cognizant es una solución de migración de tecnología de extremo a extremo para aplicaciones y bases de datos posteriores/anteriores que migra tecnología heredada a la Plataforma de Inteligencia de Datos de Databricks en la nube. Los aceleradores especializados de Cognizant generan modelos de datos, conversión y validación de código, junto con otros scripts que utilizan Gen AI y AI/ML que realizan análisis de impacto y autocorrección basados en la plataforma de destino. La metodología probada de Cognizant para la migración del ciclo de vida lo ayuda a acelerar la adopción de análisis avanzados y IA, lograr una mejor seguridad y gobernanza con Unity Catalog, y reducir su costo de implementación entre un 40% y un 50%.

Mover y modernizar sus capacidades de datos y análisis desde un entorno heredado a una plataforma moderna nativa de la nube puede ser un desafío. La Fábrica de Migración de Deloitte proporciona una solución integral al automatizar las fases de diseño, construcción y operación de la migración para permitir potentes perspectivas de datos, al tiempo que ayuda a reducir el riesgo y el costo para su organización. Para ofrecer un viaje de modernización de datos exitoso y a tiempo, la Fábrica de Migración de Deloitte configura el entorno técnico de Databricks Lakehouse y aborda la operación de datos, la gobernanza de datos, la seguridad de datos en la nube/ciberseguridad y la gestión del cambio. La solución de Deloitte también abarca marcos de migración para ayudar a los clientes a moverse a versiones actualizadas de Databricks, como PVC a E2 y Migraciones de Unity Catalog.
En un panorama donde las migraciones se ven típicamente como empresas intimidantes debido a su complejidad, riesgo y costo, EPAM Systems se destaca al transformar este desafío en una oportunidad de crecimiento y eficiencia. Aprovechando su profunda experiencia con la Plataforma de Inteligencia de Datos de Databricks, EPAM proporciona la solución Smart Migration impulsada por IA, adaptada para simplificar y agilizar la transición a Databricks para diversas organizaciones. Este enfoque no solo optimiza el proceso, sino que también asegura la gobernanza de datos y mejora los modelos operativos para un éxito sostenido. Al emplear herramientas y análisis impulsados por IA, la solución evalúa meticulosamente los ecosistemas de datos, gestionando dependencias y optimizando las estrategias de migración. Este método riguroso pero flexible reduce considerablemente el tiempo y el costo de migración, al tiempo que mejora la gobernanza de datos y la gestión de riesgos. Como resultado, las empresas pueden aprovechar al máximo las capacidades del lakehouse de Databricks, logrando una infraestructura de datos fluida, rentable y preparada para el futuro.

LeapLogic, la solución automatizada de migración a la nube de Impetus, está afinada para ofrecer la migración automatizada y sin interrupciones más rápida de la industria de cargas de trabajo heredadas y en la nube a la Plataforma de Inteligencia de Datos de Databricks con una preservación del 100% de la lógica de negocio. Con hasta un 95% de automatización que abarca la evaluación, transformación, validación y operacionalización de cargas de trabajo, LeapLogic ha ayudado a múltiples clientes Fortune 500 a acelerar el tiempo de comercialización y reducir los riesgos asociados con la migración manual.

Infosys Data Wizard es una solución integral con un conjunto de aceleradores para una migración de datos fluida. Hace que las migraciones de data warehouse y data lake, como de Teradata o Hadoop a la Plataforma de Inteligencia de Datos de Databricks, sean fluidas, seguras, manejables y rápidas. Utilizando Databricks SQL, Data Wizard ofrece una solución de migración de código basada en GenAI y una interfaz gráfica de usuario intuitiva diseñada para soportar enfoques de ejecución a través de diferentes fases de migración — desde la iniciación del proyecto hasta la configuración, recopilación de inventario, análisis, migración, validación, hasta la certificación, seguimiento y gestión de datos. Con Infosys Data Wizard, puede lograr una aceleración del 50%–60% en el ciclo de vida de la migración de datos y una reducción del 30% en el costo de las migraciones.

La Solución de Migración de Data Warehouse de Koantek elimina la complejidad, el tiempo y el riesgo asociados con la migración de su data warehouse heredado a Databricks. Incluye un transpilador SQL LLM multiagente, que convierte con precisión el esquema y la lógica de negocio de su sistema de origen a Databricks, y un balanceador de carga y programación que mejora la escalabilidad, puntualidad y eficiencia de costos de la copia de datos. También hay paneles de IA/BI para Análisis de Complejidad, Alcance del Proyecto, Validación de Datos y Código, y Monitoreo del Proyecto para ayudarle a seguir su progreso y brindarle una visión holística de todo lo relacionado con el proyecto. Esto le ayuda a alcanzar el potencial ilimitado de la Plataforma de Inteligencia de Datos de Databricks.

La Solución de Migración Brickbuilder de Data Warehouse de Lovelytics es un marco y un conjunto de aceleradores integrados diseñados para ayudar a los clientes de todas las industrias a planificar, migrar, modernizar y operar sus entornos de datos e IA en la Plataforma de Inteligencia de Datos de Databricks. Basándose en la Solución de Migración de Snowflake a Databricks existente de Lovelytics, donde los clientes han experimentado un rendimiento 2.7 veces más rápido y una eficiencia de costos 12 veces mayor, Lovelytics ha agregado capacidades para la migración desde sistemas de origen adicionales. Estos incluyen data warehouses heredados (por ejemplo, Netezza, Exadata, Teradata) así como soluciones modernas de data warehousing basadas en la nube (por ejemplo, Snowflake, AWS RedShift, Azure Synapse PaaS) al tiempo que se acelera y simplifica aún más la migración y modernización al estado objetivo basado en Databricks (por ejemplo, Databricks SQL y Unity Catalog).
Muchas organizaciones tienen plataformas de análisis tradicionales que consisten en una variedad de herramientas, lo que presenta costos y dificultades de integración. Alcazar para Migración de Datos de LTIMindtree es un acelerador de modernización inteligente para la Plataforma de Inteligencia de Datos de Databricks. Aborda los desafíos de migración al proporcionar soluciones automatizadas para datos/esquemas y ETL utilizando el LLM abierto nativo DBRX de Databricks. Con la Solución de Migración Brickbuilder de Data Warehouse de LTIMindtree, puede descubrir, acceder y colaborar de forma segura en activos de datos e IA confiables. Esta solución aprovecha la IA para aumentar la productividad y desbloquear todo el potencial del entorno lakehouse utilizando Unity Catalog y Databricks SQL.
Nousot cambia las reglas del juego en las migraciones de plataformas al ofrecer una solución que aprovecha el poder de GenAI para impulsar las migraciones de bases de datos y plataformas ETL a la Plataforma de Inteligencia de Datos de Databricks. En lugar de depender de alternativas costosas y complejas "basadas en reglas" que inevitablemente luchan por soportar las necesidades de transformación únicas de las empresas, la solución de Nousot aprovecha los Modelos de Lenguaje Grandes y las capacidades iterativas de "autocorrección" para automatizar la conversión de la sintaxis del sistema de origen a Databricks. Después de la conversión, se aplican múltiples niveles de pruebas automatizadas para garantizar resultados "idénticos" entre el sistema heredado y Databricks, lo que ha demostrado reducir el tiempo y el costo de migrar a Databricks hasta en un 80%.

Las empresas están modernizando sus plataformas de datos para obtener beneficios como análisis en tiempo real y una mejor toma de decisiones. Los data warehouses heredados, incluidos Teradata, Oracle, Netezza y SQL-Server, se quedan cortos en cuanto a requisitos de negocio como escalabilidad fluida y alta disponibilidad. Como plataforma unificada en la nube, la Plataforma de Inteligencia de Datos de Databricks permite a las organizaciones ejecutar sus aplicaciones y cargas de trabajo con eficiencia y escalabilidad. Onix garantiza una migración de datos fluida desde sus data warehouses existentes sin tiempo de inactividad. Ahorre tiempo y dinero con su conjunto de herramientas automatizadas de migración de datos, los Onix Birds, y confíe en su experiencia para modernizar rápidamente su negocio en Databricks.

La analítica no es algo que se compra, es un programa continuo. Slalom crea un equipo mixto con sus clientes para que sientan la propiedad en el crecimiento del programa de analítica. Durante las intervenciones de Slalom, sus clientes aprenden sobre la plataforma técnica al entregar junto a ellos. El cliente también experimenta una cadencia ágil donde el negocio obtiene valor al final de cada sprint de dos semanas. Slalom prepara a sus clientes para el éxito al empoderarlos para crecer y mejorar Databricks más allá de la migración exitosa.
Tredence permite la migración acelerada a la nube al ofrecer la estrategia de migración correcta, el modelo de implementación, la arquitectura optimizada y la hoja de ruta aprovechando su Migration Accelerator con prácticas, metodologías, marcos y aceleradores estandarizados para reducir el tiempo general de obtención de valor y ofrecer el máximo ROI. Para los usuarios de EDW heredados en la Plataforma de Inteligencia de Datos de Databricks, el acelerador UnityGo! ofrece el poder de la gobernanza, la descubribilidad y las capacidades de intercambio de datos abiertos de Unity Catalog en un 50% menos de tiempo. Una vez en Databricks, el Modelo de Datos Unificado de Tredence puede desbloquear el rendimiento SQL de primer nivel de Databricks, la gobernanza con Unity Catalog, las capacidades nativas de ML y la gestión del ciclo de vida de ML, incluidos casos de uso de datos en tiempo real entregados a través de las ofertas Brickbuilder específicas de la industria de Tredence. Ya sea migrando desde plataformas SAP, Teradata, SAS, Informatica, Hadoop y EDW/ETL o implementando Unity Catalog en su lakehouse EDW actual, Tredence reduce el riesgo y entrega migraciones en un 50% menos de tiempo.
Como parte del Marco de Datos y IA Responsables de Wipro, la Wipro Data Intelligence Suite (WDIS) se enfoca en modernizar los almacenes de datos, pipelines de datos y visualizaciones, impulsada por un conjunto de aceleradores de bajo código/sin código e infundidos con IA/ML, lo que permite la automatización de extremo a extremo del viaje de transformación de datos y nube que abarca los principales hiperescaladores. Al permitir la automatización de extremo a extremo del viaje de transformación de datos de una empresa, WDIS garantiza que las empresas generen valor exponencial rápidamente al tiempo que mitigan los riesgos de modernización. Ofrece una vía eficiente y confiable para las modernizaciones impulsadas por la nube que preparan el escenario para flujos de trabajo acelerados y operaciones de análisis de datos mejoradas. En términos de gobernanza, la solución Databricks Unity Catalog impulsada por WDIS facilita evaluaciones integrales, actualizaciones fluidas, validación y administración de activos de Hive Metastore dentro de Databricks Unity Catalog. Con WDIS, las empresas pueden lograr hasta un 20 % -30 % de reducción en el costo total de propiedad, un promedio de un 50 % de ganancias de productividad en los esfuerzos de migración y ahorros para migraciones grandes de ~20 % -35 %.

En Databricks, colaboramos continuamente con integradores de sistemas y socios consultores para habilitar más casos de uso en datos, analítica e IA. ¿Quiere empezar? Consulte nuestro conjunto completo de soluciones y aceleradores de socios en la página Databricks Brickbuilder.
Los Brickbuilders son un componente clave del Programa de Socios de Databricks y reconocen a los socios que han demostrado una capacidad única para ofrecer soluciones y aceleradores de datos, analítica e IA diferenciados en combinación con su experiencia en desarrollo e implementación.
Se anima a los socios interesados en obtener más información sobre cómo crear una Solución Brickbuilder a enviarnos un correo electrónico a [email protected].
(Esta entrada del blog ha sido traducida utilizando herramientas basadas en inteligencia artificial) Publicación original
Suscríbete a nuestro blog y recibe las últimas publicaciones directamente en tu bandeja de entrada.