Databricks + Neon

Oggi, siamo entusiasti di annunciare di aver concordato l'acquisizione di Neon, una società Postgres serverless, incentrata sugli sviluppatori. I co-fondatori di Neon sono tra le poche persone al mondo in grado di riprogettare Postgres con una vera separazione tra storage e calcolo, creata per sviluppatori moderni e sistemi di IA. Il loro team di livello mondiale di esperti di Postgres e veterani di database si unirà a Databricks per fornire Postgres serverless su scala di produzione agli sviluppatori in un mondo nativo dell'IA.

Una missione incentrata sugli sviluppatori, nata dall'esperienza di Postgres

Quattro anni fa, i co-fondatori di Neon si sono uniti con una visione per rivoluzionare il settore dei database. Hanno osservato che le fondamenta delle tecnologie di database erano in gran parte progettate per l'era degli anni '90. Il loro obiettivo era quello di costruire una nuova piattaforma di database che migliorasse notevolmente le esperienze per gli sviluppatori, in alcuni modi fondamentali:

1. Prevedevano che Postgres sarebbe diventato lo standard de facto per i database e avevano la visione di creare una piattaforma Postgres serverless.
2. Erano determinati a rendere possibile la creazione di una nuova istanza di Postgres in pochi secondi, in modo che gli sviluppatori non dovessero aspettare. 
3. Si sono proposti di semplificare l'aspetto operativo del ridimensionamento del database automatizzandolo al variare del carico, in modo che gli sviluppatori potessero iniziare molto piccoli e non preoccuparsi di un provisioning eccessivo o insufficiente.
4. Volevano consentire una rapida sperimentazione e test supportando la biforcazione e la ramificazione istantanea dei database e creando database completamente isolati, poiché i database sono spesso uno dei moduli più difficili da testare nei test applicativi end-to-end.

Dopo alcuni anni, il team di Neon ha progettato una nuova e innovativa architettura di database che disaccoppia il ridimensionamento dello storage dal ridimensionamento del calcolo, il che alla fine ha permesso di raggiungere tutti gli obiettivi di cui sopra. Quando Neon è stato lanciato per la prima volta, gli sviluppatori hanno elogiato la velocità, la semplicità e la capacità di ramificare e biforcare i loro database come fa Git per il codice.

Il passaggio agli agenti di IA

Quando Neon è diventato GA l'anno scorso, hanno notato una statistica interessante: il 30% dei database sono stati creati da agenti di IA, non da umani. Quando hanno esaminato di nuovo le loro statistiche di recente, il numero è passato dal 30% a oltre l'80%. Vale a dire che gli agenti di IA stavano creando 4 volte più database rispetto agli umani.

Se pensi agli agenti di IA come al tuo enorme team di sviluppatori junior ad alta velocità (potenzialmente "guidati" da sviluppatori senior), non sorprende che le stesse funzionalità su cui si è concentrato il team di Neon e che hanno reso Neon eccezionale per gli sviluppatori abbiano reso Neon eccezionale anche per questi agenti di IA:

1. Ecosistema open source di Postgres: tutti i modelli linguistici di grandi dimensioni (LLM) di frontiera sono stati addestrati sulla vasta quantità di informazioni pubbliche disponibili sull'ecosistema open source di Postgres, quindi tutti gli agenti di IA sono esperti nell'uso di Neon, che è costruito su Postgres.
2. Velocità: i database tradizionali sono stati progettati per essere forniti e gestiti dagli esseri umani. Andava bene impiegare alcuni minuti per avviare un database. Dato che gli agenti di IA operano alla velocità della macchina, i tempi di provisioning ultra rapidi diventano fondamentali.
3. Ridimensionamento elastico e prezzi: l'architettura serverless di storage disaccoppiato dal calcolo consente istanze Postgres a costi estremamente bassi. Ora è possibile lanciare migliaia o addirittura milioni di agenti con i propri database in modo economicamente vantaggioso.
4. Ramificazione e biforcazione: gli agenti di IA possono essere non deterministici e le "vibrazioni" devono essere controllate e verificate. La capacità di Neon di creare istantaneamente una copia completa di un database, non solo per lo schema ma anche per i dati, consente a tutti questi agenti di IA di operare sulla propria istanza di database isolata in alta fedeltà per la sperimentazione e la convalida.

DNA condiviso

Conosciamo da tempo Nikita Shamgunov, Heikki Linnakangas e Stas Kelvich, i fondatori di Neon. Prima di Neon, Nikita ha iniziato la sua carriera lavorando su SQL Server e in seguito è diventato famoso nella comunità dei database come co-fondatore e CEO di SingleStore, portando l'attività della startup a oltre 100 milioni di dollari di entrate annuali. Heikki è un committer su Postgres da due decenni: ha iniziato il suo viaggio in Postgres quando si annoiava durante il congedo di paternità e ha deciso di esaminare il funzionamento interno di Postgres per divertimento. Stas è un ex fisico che si è dedicato all'hacking di Postgres perché aveva bisogno di una migliore implementazione di R-tree per la sua startup di motori di ricerca per il turismo.

Databricks e Neon condividono lo stesso DNA nella costruzione di innovazioni tecniche hardcore a livello di infrastruttura. Condividiamo anche la convinzione dell'importanza dell'open source: originariamente abbiamo avviato il progetto Apache Spark™ presso l'UC Berkeley, che è anche il luogo di nascita originale di Postgres, il progetto di database open source su cui si basa Neon.

Guardando avanti

I database OLTP rappresentano un mercato da 100 miliardi di dollari dominato da prodotti costruiti decenni fa. Riteniamo che sia giunto il momento che questo mercato venga rivoluzionato dagli sviluppatori e dagli agenti di IA. Insieme al team di Neon, non vediamo l'ora di costruire la piattaforma di database più adatta agli sviluppatori e agli agenti di IA.

Cosa significa questo per i clienti e i partner Neon esistenti? Siamo pienamente impegnati per il futuro della piattaforma Neon. La roadmap rimane ambiziosa e intendiamo continuare a rendere Neon la migliore piattaforma di database per gli sviluppatori. Dopo la chiusura, i clienti e i partner esistenti possono aspettarsi supporto e innovazione continui, ora con il pieno sostegno e le risorse di Databricks. È un grande momento per gli utenti Neon esistenti e un momento entusiasmante per gli sviluppatori che stanno appena scoprendo Neon. Vai a lanciare una nuova istanza di Postgres su Neon oggi stesso!

Siamo ugualmente entusiasti di ciò che questo significherà per i clienti aziendali di Databricks. Abbiamo in programma di condividere molto di più al prossimo Data + AI Summit a San Francisco, dal 9 al 12 giugno.

Dai un'occhiata al blog di Neon per sentire direttamente da loro perché sono entusiasti di unire le forze.

(Questo post sul blog è stato tradotto utilizzando strumenti basati sull'intelligenza artificiale) Post originale