Databricks + Neon

Hoy, nos complace anunciar que hemos acordado adquirir Neon, una empresa de Postgres sin servidor, pensada primero para los desarrolladores. Los cofundadores de Neon se encuentran entre las pocas personas en el mundo que podrían rediseñar Postgres con una verdadera separación del almacenamiento y el proceso, creada para los desarrolladores modernos y los sistemas de IA. Su equipo de primer nivel de hackers de Postgres y veteranos de bases de datos se unirán a Databricks para ofrecer Postgres sin servidor a escala de producción a los desarrolladores en un mundo nativo de la IA.

Una misión pensada primero para los desarrolladores, nacida de la experiencia en Postgres

Hace cuatro años, los cofundadores de Neon se unieron con la visión de revolucionar la industria de las bases de datos. Observaron que los cimientos de las tecnologías de bases de datos se diseñaron en gran medida para la era de los 90. Su objetivo era construir una nueva plataforma de base de datos que mejorara drásticamente las experiencias de los desarrolladores, de algunas maneras fundamentales:

1. Preveían que Postgres se convertiría en el estándar de facto para las bases de datos y tenían la visión de crear una plataforma de Postgres sin servidor.
2. Estaban decididos a hacer posible la creación de una nueva instancia de Postgres en segundos, para que los desarrolladores no tuvieran que esperar. 
3. Se propusieron simplificar el aspecto operativo del escalado de la base de datos automatizándolo a medida que cambiaba la carga, para que los desarrolladores pudieran empezar de forma muy pequeña y no preocuparse por el sobreaprovisionamiento o el infraaprovisionamiento.
4. Querían permitir la experimentación y las pruebas rápidas mediante la compatibilidad con la bifurcación y la ramificación instantáneas de las bases de datos y la creación de bases de datos totalmente aisladas, ya que las bases de datos suelen ser uno de los módulos más difíciles de probar en las pruebas de aplicaciones de extremo a extremo.

Después de algunos años, el equipo de Neon diseñó una nueva e innovadora arquitectura de base de datos que desacopla el escalado del almacenamiento del escalado del proceso, lo que en última instancia permitió alcanzar todos los objetivos anteriores. Cuando Neon se lanzó por primera vez, los desarrolladores elogiaron la velocidad, la simplicidad y la capacidad de ramificar y bifurcar sus bases de datos como Git lo hace con el código.

El cambio hacia los agentes de IA

Cuando Neon se convirtió en GA el año pasado, notaron una estadística interesante: el 30 % de las bases de datos fueron creadas por agentes de IA, no por humanos. Cuando volvieron a mirar sus estadísticas recientemente, el número pasó del 30 % a más del 80 %. Es decir, los agentes de IA estaban creando 4 veces más bases de datos que los humanos.

Si piensa en los agentes de IA como su propio equipo masivo de desarrolladores júnior de alta velocidad (potencialmente "asesorados" por desarrolladores sénior), entonces no es sorprendente que las mismas capacidades en las que se centró el equipo de Neon que hicieron que Neon fuera genial para los desarrolladores también hicieran que Neon fuera genial para estos agentes de IA:

1. Ecosistema de código abierto de Postgres: todos los LLM de vanguardia se han entrenado con la gran cantidad de información pública disponible sobre el ecosistema de código abierto de Postgres, por lo que todos los agentes de IA son expertos en el uso de Neon, que se basa en Postgres.
2. Velocidad: las bases de datos tradicionales se diseñaron para que los humanos las aprovisionaran y operaran. Estaba bien tardar minutos en poner en marcha una base de datos. Dado que los agentes de IA operan a la velocidad de la máquina, el tiempo de aprovisionamiento ultrarrápido se vuelve crítico.
3. Escalado y precios elásticos: La arquitectura sin servidor de almacenamiento desacoplado del proceso permite instancias de Postgres de costo extremadamente bajo. Ahora es posible lanzar miles o incluso millones de agentes con sus propias bases de datos de forma rentable.
4. Ramificación y bifurcación: los agentes de IA pueden ser no deterministas, y es necesario comprobar y verificar las "vibraciones". La capacidad de Neon para crear instantáneamente una copia completa de una base de datos, no solo para el esquema, sino también para los datos, permite que todos estos agentes de IA operen en su propia instancia de base de datos aislada con alta fidelidad para la experimentación y la validación.

ADN compartido

Conocemos desde hace mucho tiempo a Nikita Shamgunov, Heikki Linnakangas y Stas Kelvich, los fundadores de Neon. Antes de Neon, Nikita comenzó su carrera trabajando en SQL Server y más tarde se hizo conocido en la comunidad de bases de datos como cofundador y director ejecutivo de SingleStore, impulsando el negocio de la startup a más de 100 millones de dólares en ingresos anuales. Heikki ha sido colaborador de Postgres durante dos décadas: comenzó su viaje en Postgres cuando estaba aburrido en la baja por paternidad y decidió investigar los aspectos internos de Postgres por diversión. Stas es un ex físico que se metió en el hacking de Postgres porque necesitaba una mejor implementación de R-tree para su startup de motor de búsqueda de turismo.

Databricks y Neon comparten el mismo ADN en la construcción de innovaciones técnicas hardcore en la capa de infraestructura. También compartimos la creencia en la importancia del código abierto: originalmente comenzamos el proyecto Apache Spark™ en UC Berkeley, que también resulta ser el lugar de nacimiento original de Postgres, el proyecto de base de datos de código abierto en el que se basa Neon.

Mirando hacia el futuro

Las bases de datos OLTP representan un mercado de 100 mil millones de dólares dominado por productos que se construyeron hace décadas. Creemos que es hora de que este mercado sea revolucionado por los desarrolladores y los agentes de IA. Junto con el equipo de Neon, esperamos construir la plataforma de base de datos más amigable para los desarrolladores y los agentes de IA.

¿Qué significa esto para los clientes y socios existentes de Neon? Estamos totalmente comprometidos con el futuro de la plataforma Neon. La hoja de ruta sigue siendo ambiciosa, y tenemos la intención de seguir haciendo de Neon la mejor plataforma de base de datos para los desarrolladores. Después del cierre, los clientes y socios existentes pueden esperar un apoyo e innovación continuos, ahora con el respaldo y los recursos completos de Databricks. Es un gran momento para los usuarios existentes de Neon, y uno emocionante para los desarrolladores que acaban de descubrir Neon. ¡Vaya a lanzar una nueva instancia de Postgres en Neon hoy mismo!

Estamos igualmente entusiasmados con lo que esto significará para los clientes empresariales de Databricks. Planeamos compartir mucho más en la próxima Data + AI Summit en San Francisco, del 9 al 12 de junio.

Consulte el blog de Neon para escuchar directamente de ellos por qué están emocionados de unir fuerzas.

(Esta entrada del blog ha sido traducida utilizando herramientas basadas en inteligencia artificial) Publicación original