Databricks + Neon

오늘, 저희는 개발자 우선 서버리스 Postgres 기업인 Neon을 인수하기로 합의했다는 소식을 발표하게 되어 기쁩니다. Neon의 공동 창립자들은 스토리지와 컴퓨팅의 진정한 분리를 통해 현대 개발자와 AI 시스템을 위해 구축된 Postgres를 재설계할 수 있는 세계에서 몇 안 되는 인물들입니다. 이들의 세계적 수준의 Postgres 해커 및 데이터베이스 베테랑 팀은 AI 네이티브 세상에서 개발자에게 프로덕션 규모의 서버리스 Postgres를 제공하기 위해 Databricks에 합류할 것입니다.

Postgres 전문성에서 탄생한 개발자 우선 사명

4년 전, Neon의 공동 창립자들은 데이터베이스 산업을 혁신하겠다는 비전으로 함께 모였습니다. 그들은 데이터베이스 기술의 기반이 대부분 90년대 시대를 위해 설계되었다는 것을 관찰했습니다. 그들의 목표는 개발자 경험을 근본적인 방식으로 크게 개선할 새로운 데이터베이스 플랫폼을 구축하는 것이었습니다.

1. 그들은 Postgres가 데이터베이스의 사실상의 표준이 될 것이라고 예측했으며 서버리스 Postgres 플랫폼을 만들 비전을 가지고 있었습니다.
2. 개발자들이 기다릴 필요가 없도록 몇 초 안에 새로운 Postgres 인스턴스를 생성할 수 있도록 만드는 데 전념했습니다.
3. 부하가 변경됨에 따라 자동화하여 데이터베이스 확장 운영 측면을 단순화하여 개발자가 매우 작게 시작하고 과잉 또는 과소 프로비저닝에 대해 걱정할 필요가 없도록 했습니다.
4. 데이터베이스는 종종 엔드투엔드 애플리케이션 테스트에서 테스트하기 가장 어려운 모듈 중 하나이기 때문에 즉각적인 포크 및 브랜칭을 지원하고 완전히 격리된 데이터베이스를 생성하여 빠른 실험 및 테스트를 가능하게 했습니다.

몇 년 후, Neon 팀은 스토리지 확장을 컴퓨팅 확장과 분리하는 새롭고 혁신적인 데이터베이스 아키텍처를 설계했으며, 이는 궁극적으로 위의 모든 목표를 달성할 수 있게 했습니다. Neon이 처음 출시되었을 때 개발자들은 속도, 단순성, Git이 코드에 하는 것처럼 데이터베이스를 브랜치하고 포크할 수 있는 능력에 대해 극찬했습니다.

AI 에이전트를 향한 전환

작년에 Neon이 GA가 되었을 때, 그들은 흥미로운 통계를 발견했습니다. 데이터베이스의 30%가 사람이 아닌 AI 에이전트에 의해 생성되었습니다. 최근에 다시 통계를 확인했을 때, 그 수치는 30%에서 80% 이상으로 증가했습니다. 즉, AI 에이전트가 사람보다 4배 더 많은 데이터베이스를 생성했습니다.

AI 에이전트를 자체적인 대규모 고속 주니어 개발자 팀(잠재적으로 시니어 개발자에 의해 “멘토링”됨)으로 생각하면, Neon 팀이 개발자에게 Neon을 훌륭하게 만든 동일한 기능이 AI 에이전트에게도 훌륭하게 만든다는 것은 놀라운 일이 아닙니다.

1. Postgres 오픈 소스 생태계: 모든 최전선 LLM은 Postgres 오픈 소스 생태계에 대한 방대한 공개 정보를 기반으로 학습되었으므로 모든 AI 에이전트는 Postgres를 기반으로 구축된 Neon 사용에 능숙합니다.
2. 속도: 기존 데이터베이스는 사람이 프로비저닝하고 운영하도록 설계되었습니다. 데이터베이스를 시작하는 데 몇 분이 걸려도 괜찮았습니다. AI 에이전트는 기계 속도로 작동하므로 초고속 프로비저닝 시간이 중요해집니다.
3. 탄력적 확장 및 가격 책정: 스토리지와 컴퓨팅을 분리한 서버리스 아키텍처는 매우 저렴한 Postgres 인스턴스를 가능하게 합니다. 이제 수천 또는 수백만 개의 에이전트를 각자의 데이터베이스와 함께 비용 효율적으로 실행할 수 있습니다.
4. 브랜칭 및 포크: AI 에이전트는 비결정적일 수 있으며, “느낌”을 확인하고 검증해야 합니다. 스키마뿐만 아니라 데이터에 대한 데이터베이스의 전체 복사본을 즉시 생성하는 Neon의 기능은 이러한 모든 AI 에이전트가 실험 및 검증을 위해 자체 격리된 데이터베이스 인스턴스에서 높은 충실도로 작동할 수 있도록 합니다.

공유 DNA

우리는 Neon의 창립자인 Nikita Shamgunov, Heikki Linnakangas, Stas Kelvich를 오랫동안 알고 지냈습니다. Neon 이전에 Nikita는 SQL Server에서 경력을 시작했으며 나중에 SingleStore의 공동 창립자이자 CEO로서 데이터베이스 커뮤니티에서 잘 알려지게 되었고, 이 스타트업의 비즈니스를 연간 1억 달러 이상의 수익으로 이끌었습니다. Heikki는 20년 동안 Postgres의 커미터였습니다. 그는 잠시 육아 휴직 중에 지루함을 느껴 재미로 Postgres 내부를 살펴보기 시작했습니다. Stas는 전직 물리학자로, 관광 검색 엔진 스타트업을 위해 더 나은 R-tree 구현이 필요했기 때문에 Postgres 해킹에 뛰어들었습니다.

Databricks와 Neon은 인프라 계층에서 하드코어 기술 혁신을 구축하는 데 있어 동일한 DNA를 공유합니다. 우리는 또한 오픈 소스의 중요성에 대한 믿음을 공유합니다. 우리는 원래 UC Berkeley에서 Apache Spark™ 프로젝트를 시작했으며, 이곳은 Neon이 구축하는 오픈 소스 데이터베이스 프로젝트인 Postgres의 원래 탄생지이기도 합니다.

앞으로의 전망

OLTP 데이터베이스는 수십 년 전에 구축된 제품이 지배하는 1000억 달러 규모의 시장을 나타냅니다. 우리는 이 시장이 개발자와 AI 에이전트에 의해 혁신될 때라고 믿습니다. Neon 팀과 함께 개발자 및 AI 에이전트에게 가장 친근한 데이터베이스 플랫폼을 구축하기를 기대합니다.

기존 Neon 고객 및 파트너에게 이것이 무엇을 의미할까요? 우리는 Neon 플랫폼의 미래에 전적으로 전념하고 있습니다. 로드맵은 야심차게 유지되고 있으며, 우리는 Neon을 개발자를 위한 최고의 데이터베이스 플랫폼으로 계속 만들 계획입니다. 거래가 완료된 후, 기존 고객 및 파트너는 Databricks의 전폭적인 지원과 리소스를 통해 지속적인 지원과 혁신을 기대할 수 있습니다. 기존 Neon 사용자에게는 훌륭한 순간이며, Neon을 처음 발견하는 개발자에게는 흥미로운 순간입니다. 지금 바로 Neon에서 새로운 Postgres 인스턴스를 시작하세요!

우리는 이것이 Databricks의 엔터프라이즈 고객에게 무엇을 의미할지에 대해서도 똑같이 기대하고 있습니다. 6월 9일부터 12일까지 샌프란시스코에서 열리는 다가오는 Data + AI Summit에서 더 많은 내용을 공유할 예정입니다.

Neon의 블로그를 확인하여 그들이 왜 힘을 합치게 된 것에 대해 기대하는지 직접 들어보세요.

(이 글은 AI의 도움을 받아 번역되었습니다. 원문이 궁금하시다면 여기를 클릭해 주세요)