Databricks + Mosaic AI

Hoy, nos complace anunciar que hemos completado la adquisición de MosaicML, una plataforma líder para crear y personalizar modelos de IA generativa para su empresa. Desde la fundación de Databricks, nuestra misión ha sido democratizar los datos y la IA para cada empresa. La IA generativa impulsará la próxima ola de aplicaciones de datos empresariales y, junto con MosaicML, planeamos ofrecer la mejor experiencia para entrenar, personalizar e implementar aplicaciones de IA generativa.

Trabajaremos junto con el equipo de MosaicML para acelerar lo que consideramos los tres desarrollos más importantes necesarios para llevar la IA generativa al mercado general para las empresas:

Democratización rápida de las capacidades del modelo. Creemos en un futuro en el que los modelos estén ampliamente disponibles para todas las empresas. La democratización de cualquier tecnología requiere precios reducidos y un mayor acceso. El equipo de MosaicML se ha centrado en mejorar la eficiencia del hardware y el software para reducir drásticamente el precio de entrenamiento y personalización de modelos de lenguaje grandes. Continuaremos trabajando juntos para reducir los costos de entrenamiento y servicio con el fin de proporcionar capacidades de modelado de alta calidad a una porción cada vez mayor del mercado. La democratización también requiere acceso a técnicas. Trabajaremos con el equipo de investigación de MosaicML para continuar innovando, de forma abierta, en arquitecturas de modelado como las que impulsaron los populares LLM base MPT-7B y MPT-30B. A día de hoy, MPT-7B ha sido descargado más de 3 millones de veces, lo que lo convierte en el LLM abierto más descargado de la historia.

Hacer que los modelos de IA generativa funcionen para las empresas. Todos nos hemos familiarizado con los chatbots de propósito general. Al igual que los chatbots de consumo, las aplicaciones de IA empresariales también se benefician de las capacidades de razonamiento y las interfaces basadas en lenguaje. Pero a diferencia de los chatbots generales, las aplicaciones empresariales tienen muchos requisitos adicionales. Deben incorporar grandes volúmenes de datos personalizados: información sobre procesos de negocio, clientes, cuentas, pedidos u otros aspectos de su negocio. Deben garantizar la privacidad y seguridad de sus usuarios y sus datos. Las aplicaciones empresariales también tienen poca tolerancia a las alucinaciones o respuestas incorrectas. Databricks y MosaicML juntos harán que sea mucho más fácil para las empresas incorporar sus propios datos para implementar aplicaciones de IA seguras y efectivas.

Unificación de la pila de datos e IA. Cada parte del ciclo de vida de desarrollo del modelo requiere buenos datos. Las empresas se diferenciarán de la competencia utilizando datos propietarios que les permitan crear mejores modelos y aplicaciones más inteligentes. Con MosaicML, Databricks continuará poniendo los datos en el centro del viaje de la IA. Esto incluye la preparación de datos upstream como la limpieza, la creación de características y la incrustación de datos para su uso en modelos. También incluye el uso de datos para mejorar los modelos, en un bucle de refuerzo positivo, aprendiendo de los datos generados cómo están funcionando los modelos y enseñando a los modelos basándose en resultados generados previamente. En cada etapa del ciclo de vida del aprendizaje automático, los datos y los modelos deben ser curados conjuntamente para construir las mejores aplicaciones. Esto es aún más importante para los modelos generativos, donde la calidad y la seguridad dependen tanto de buenos datos de entrenamiento.

El producto de MosaicML, que permite a las empresas crear modelos de IA grandes de manera eficiente sobre sus propios datos y procesos de negocio, seguirá estando disponible para compra directa. En el futuro, integraremos MosaicML estrechamente con la Plataforma Lakehouse AI, acercando la pila de entrenamiento a los datos del cliente y otras capacidades de Lakehouse AI. 

Estamos entusiasmados con el futuro de Databricks y MosaicML y cómo podemos ayudar a nuestros clientes con sus ambiciones de IA generativa.

(Esta entrada del blog ha sido traducida utilizando herramientas basadas en inteligencia artificial) Publicación original