Databricks + Neon

Hoje, estamos animados em anunciar que concordamos em adquirir a Neon, uma empresa de Postgres sem servidor voltada para desenvolvedores. Os co-fundadores da Neon estão entre as poucas pessoas no mundo que poderiam re-arquitetar o Postgres com verdadeira separação de armazenamento e computação, construído para desenvolvedores modernos e sistemas de IA. Sua equipe de primeira classe de hackers Postgres e veteranos de banco de dados se juntará à Databricks para entregar Postgres sem servidor em escala de produção para desenvolvedores em um mundo nativo de IA.

Uma missão voltada para o desenvolvedor, nascida da expertise em Postgres

Quatro anos atrás, os co-fundadores da Neon se uniram com a visão de disruptar a indústria de banco de dados. Eles observaram que as fundações das tecnologias de banco de dados foram em grande parte projetadas para a era dos anos 90. O objetivo deles era construir uma nova plataforma de banco de dados que melhoraria dramaticamente as experiências dos desenvolvedores, de algumas maneiras fundamentais:

1. Eles previram que o Postgres se tornaria o padrão de fato para bancos de dados e tiveram a visão de criar uma plataforma Postgres sem servidor.
2. Eles estavam determinados a tornar possível criar uma nova instância do Postgres em segundos, para que os desenvolvedores não precisassem esperar. 
3. Eles se propuseram a simplificar o aspecto operacional do escalonamento de bancos de dados automatizando-o conforme a carga mudava, para que os desenvolvedores pudessem começar muito pequenos e não se preocupassem com a super ou sub-provisão.
4. Eles queriam possibilitar experimentação e teste rápidos, apoiando a criação instantânea de ramificações e bifurcações de bancos de dados e criando bancos de dados totalmente isolados, já que os bancos de dados são frequentemente um dos módulos mais difíceis de testar em testes de aplicativos de ponta a ponta.

Alguns anos depois, a equipe Neon desenvolveu uma nova e inovadora arquitetura de banco de dados que desacopla o escalonamento de armazenamento do escalonamento de computação, o que finalmente possibilitou todos os objetivos acima. Quando o Neon foi lançado pela primeira vez, os desenvolvedores elogiaram a velocidade, a simplicidade e a capacidade de ramificar e bifurcar seus bancos de dados como o Git faz para o código.

A mudança para agentes de IA

Quando o Neon se tornou GA no ano passado, eles notaram uma estatística interessante: 30% dos bancos de dados foram criados por agentes de IA, não por humanos. Quando eles olharam suas estatísticas novamente recentemente, o número passou de 30% para mais de 80%. Ou seja, agentes de IA estavam criando 4 vezes mais bancos de dados do que humanos.

Se você considera os agentes de IA como sua própria equipe massiva de desenvolvedores júnior de alta velocidade (potencialmente "orientados" por desenvolvedores sênior), então não é surpreendente que as mesmas capacidades em que a equipe Neon se concentrou que tornaram o Neon ótimo para desenvolvedores também tornaram o Neon ótimo para esses agentes de IA:

1. Ecossistema de código aberto Postgres: Todos os LLMs de fronteira foram treinados na vasta quantidade de informações públicas disponíveis sobre o ecossistema de código aberto Postgres, então todos os agentes de IA são especialistas em usar o Neon, que é construído no Postgres.
2. Velocidade: Bancos de dados tradicionais foram projetados para serem provisionados e operados por humanos. Era aceitável levar minutos para iniciar um banco de dados. Dado que os agentes de IA operam na velocidade da máquina, o tempo de provisionamento ultra rápido se torna crítico.
3. Escala e precificação elásticas: A arquitetura serverless que desacopla o armazenamento do processamento permite instâncias Postgres de custo extremamente baixo. Agora é possível lançar milhares ou até milhões de agentes com seus próprios bancos de dados de forma econômica.
4. Ramificação e bifurcação: Agentes de IA podem ser não determinísticos, e "vibrações" precisam ser verificadas e validadas. A capacidade da Neon de criar instantaneamente uma cópia completa de um banco de dados, não apenas para o esquema, mas também para os dados, permite que todos esses agentes de IA operem em sua própria instância de banco de dados isolada em alta fidelidade para experimentação e validação.

DNA compartilhado

Conhecemos há muito tempo Nikita Shamgunov, Heikki Linnakangas e Stas Kelvich - os fundadores do Neon. Antes do Neon, Nikita começou sua carreira trabalhando com SQL Server e mais tarde se tornou conhecido na comunidade de banco de dados como co-fundador e CEO da SingleStore, levando o negócio da startup a mais de $100M em receita anual. Heikki tem sido um colaborador do Postgres por duas décadas - ele começou sua jornada no Postgres quando estava entediado em sua licença paternidade e decidiu estudar os mecanismos internos do Postgres por diversão. Stas é um ex-físico que começou a hackear Postgres porque precisava de uma melhor implementação de R-tree para a startup de seu mecanismo de busca de turismo.

Databricks e Neon compartilham o mesmo DNA na construção de inovações técnicas hardcore na camada de infraestrutura. Também compartilhamos a crença na importância do código aberto: originalmente começamos o projeto Apache Spark™ na UC Berkeley, que também acontece de ser o local de origem do Postgres, o projeto de banco de dados de código aberto no qual o Neon se baseia.

Olhando para frente

Bancos de dados OLTP representam um mercado de $100B dominado por produtos que foram construídos décadas atrás. Acreditamos que é hora deste mercado ser disruptivo por desenvolvedores e agentes de IA. Juntamente com a equipe Neon, esperamos construir a plataforma de banco de dados mais amigável para desenvolvedores e agentes de IA.

O que isso significa para os clientes e parceiros Neon existentes? Estamos totalmente comprometidos com o futuro da plataforma Neon. O roteiro continua ambicioso e pretendemos continuar tornando o Neon a melhor plataforma de banco de dados para desenvolvedores. Após o fechamento, os clientes e parceiros existentes podem esperar suporte e inovação contínuos - agora com o total apoio e recursos da Databricks. É um ótimo momento para os usuários Neon existentes e um emocionante para os desenvolvedores que estão descobrindo o Neon. Inicie uma nova instância do Postgres no Neon hoje!

Estamos igualmente entusiasmados com o que isso significará para os clientes corporativos da Databricks. Planejamos compartilhar muito mais no próximo Data + AI Summit em São Francisco, de 9 a 12 de junho.

Confira o blog da Neon para ouvir diretamente deles sobre por que estão animados para unir forças.

(This blog post has been translated using AI-powered tools) Original Post