Databricks + Neon

Hoy, nos complace anunciar que hemos acordado adquirir Neon, una empresa de Postgres sin servidor centrada en el desarrollador. Los cofundadores de Neon se encuentran entre las pocas personas en el mundo que podrían re-arquitectar Postgres con una separación real de almacenamiento y cómputo, construida para desarrolladores modernos y sistemas de IA. Su equipo de clase mundial de hackers de Postgres y veteranos de bases de datos se unirá a Databricks para ofrecer Postgres sin servidor a escala de producción para desarrolladores en un mundo nativo de IA.

Una misión centrada en el desarrollador, nacida de la experiencia en Postgres

Hace cuatro años, los cofundadores de Neon se unieron con la visión de revolucionar la industria de las bases de datos. Observaron que los cimientos de las tecnologías de bases de datos fueron diseñados en gran medida para la era de los 90. Su objetivo era construir una nueva plataforma de bases de datos que mejorara drásticamente las experiencias de los desarrolladores, de maneras fundamentales:

1. Preveyeron que Postgres se convertiría en el estándar de facto para las bases de datos y tuvieron la visión de crear una plataforma Postgres sin servidor.
2. Estaban decididos a hacer posible la creación de una nueva instancia de Postgres en segundos, para que los desarrolladores no tuvieran que esperar. 
3. Se propusieron simplificar el aspecto operativo de la escalabilidad de bases de datos automatizándola a medida que la carga cambiaba, para que los desarrolladores pudieran empezar con algo muy pequeño y no preocuparse por el sobre o sub-aprovisionamiento.
4. Querían permitir la experimentación y las pruebas rápidas admitiendo la bifurcación y ramificación instantánea de bases de datos y creando bases de datos completamente aisladas, ya que las bases de datos son a menudo uno de los módulos más difíciles de probar en las pruebas de aplicaciones de extremo a extremo.

Unos años después, el equipo de Neon diseñó una arquitectura de base de datos nueva e innovadora que desacopla la escalabilidad del almacenamiento de la escalabilidad del cómputo, lo que finalmente permitió todos los objetivos anteriores. Cuando Neon se lanzó por primera vez, los desarrolladores elogiaron la velocidad, la simplicidad y la capacidad de ramificar y bifurcar sus bases de datos como Git lo hace para el código.

El cambio hacia los agentes de IA

Cuando Neon se convirtió en GA el año pasado, notaron una estadística interesante: el 30% de las bases de datos fueron creadas por agentes de IA, no por humanos. Cuando volvieron a mirar sus estadísticas recientemente, el número pasó del 30% a más del 80%. Es decir, los agentes de IA estaban creando 4 veces más bases de datos que los humanos.

Si piensas en los agentes de IA como tu propio equipo masivo de desarrolladores junior de alta velocidad (potencialmente "guiados" por desarrolladores senior), entonces no es sorprendente que las mismas capacidades en las que se centró el equipo de Neon, que hicieron que Neon fuera genial para los desarrolladores, también hicieran que Neon fuera genial para estos agentes de IA:

1. Ecosistema de código abierto de Postgres: Todos los LLM de vanguardia han sido entrenados con la gran cantidad de información pública disponible sobre el ecosistema de código abierto de Postgres, por lo que todos los agentes de IA son expertos en el uso de Neon, que está construido sobre Postgres.
2. Velocidad: Las bases de datos tradicionales fueron diseñadas para que los humanos las aprovisionaran y operaran. Estaba bien tardar minutos en iniciar una base de datos. Dado que los agentes de IA operan a velocidad de máquina, el tiempo de aprovisionamiento ultrarrápido se vuelve crítico.
3. Escalabilidad elástica y precios: La arquitectura sin servidor con almacenamiento y cómputo desacoplados permite instancias de Postgres de costo extremadamente bajo. Ahora es posible lanzar miles o incluso millones de agentes con sus propias bases de datos de manera rentable.
4. Ramificación y bifurcación: Los agentes de IA pueden ser no deterministas, y las "intuiciones" deben ser verificadas. La capacidad de Neon para crear instantáneamente una copia completa de una base de datos, no solo para el esquema sino también para los datos, permite que todos estos agentes de IA operen en su propia instancia de base de datos aislada con alta fidelidad para la experimentación y la validación.

ADN compartido

Conocemos desde hace mucho tiempo a Nikita Shamgunov, Heikki Linnakangas y Stas Kelvich, los fundadores de Neon. Antes de Neon, Nikita comenzó su carrera trabajando en SQL Server y luego se hizo bien conocido en la comunidad de bases de datos como cofundador y CEO de SingleStore, llevando el negocio de la startup a más de $100 millones en ingresos anuales. Heikki ha sido un contribuidor de Postgres durante dos décadas; comenzó su viaje en Postgres cuando estaba aburrido durante su baja de paternidad y decidió investigar los detalles internos de Postgres por diversión. Stas es un ex-físico que se metió en el hacking de Postgres porque necesitaba una mejor implementación de R-tree para su startup de motor de búsqueda de turismo.

Databricks y Neon comparten el mismo ADN en la construcción de innovaciones técnicas de vanguardia en la capa de infraestructura. También compartimos la creencia en la importancia del código abierto: originalmente iniciamos el proyecto Apache Spark™ en UC Berkeley, que también resulta ser el lugar de nacimiento original de Postgres, el proyecto de base de datos de código abierto en el que se basa Neon.

Mirando hacia el futuro

Las bases de datos OLTP representan un mercado de $100 mil millones dominado por productos que se construyeron hace décadas. Creemos que es hora de que este mercado sea revolucionado por desarrolladores y agentes de IA. Junto con el equipo de Neon, esperamos construir la plataforma de bases de datos más amigable para desarrolladores y agentes de IA.

¿Qué significa esto para los clientes y socios actuales de Neon? Estamos totalmente comprometidos con el futuro de la plataforma Neon. La hoja de ruta sigue siendo ambiciosa y tenemos la intención de seguir haciendo de Neon la mejor plataforma de bases de datos para desarrolladores. Después del cierre, los clientes y socios existentes pueden esperar soporte e innovación continuos, ahora con el respaldo total y los recursos de Databricks. Es un gran momento para los usuarios actuales de Neon y uno emocionante para los desarrolladores que recién descubren Neon. ¡Lanza hoy mismo una nueva instancia de Postgres en Neon!

Estamos igualmente entusiasmados con lo que esto significará para los clientes empresariales de Databricks. Planeamos compartir mucho más en la próxima Data + AI Summit en San Francisco, del 9 al 12 de junio.

Consulta el blog de Neon para escuchar directamente de ellos por qué están entusiasmados de unir fuerzas.

(Esta entrada del blog ha sido traducida utilizando herramientas basadas en inteligencia artificial) Publicación original