Databricks on Google CloudでサーバーレスSQLの一般提供を開始
本日、Databricks SQL ServerlessがGoogle Cloud Platform（GCP）で一般提供開始されたことをお知らせします。Databricks SQL Serverlessは、データインテリジェンスプラットフォームの主要コンポーネントとして、瞬時に伸縮自在なコンピューティングにより最高のパフォーマンスを提供し、コストを削減して、インフラストラクチャの管理ではなくビジネス価値の提供に集中できるようにします。この一般提供リリースは、最高のデータウェアハウスはレイクハウスであり、データレイクとウェアハウスを統合して統一的なアプローチを提供するという私たちの信念を強化します。SQL Serverlessは現在、7つのGCPリージョンと、すべての主要なクラウドプロバイダー（AWS、Azure、GCP）の40以上のリージョンで利用可能です。
GCP上のDatabricks SQL Serverlessの利点
過去数年間で、レイクハウス専用に設計されたデータウェアハウスであるDatabricks SQLの成長と採用は4倍以上に増加しました。GCP上のSQL Serverlessには次のような多くのメリットがあります：
- 即時かつ柔軟なコンピューティング： SQL Serverlessのコンピューティングは、すぐに利用可能で、ニーズに合わせてスケールする真に柔軟な環境を提供します。アイドル時間の料金を心配することなく、シンプルな使用量ベースの料金体系のメリットを享受できます。クエリを実行するためのインフラリソースを利用可能になるまで待つ必要がなくなり、使用量の急増に対応するためにリソースを過剰にプロビジョニングする必要がなくなることを想像してみてください。Databricks SQL Serverlessは、リソースを自動的に増減させることで、投入されるあらゆるワークロードに対応します。
- インフラコストの削減：サーバーレスのコンピューティングプラットフォームは、必要に応じてコンピューティングリソースをプロビジョニングし、スケールするために機械学習（ML）アルゴリズムを使用しています。SQL Serverlessは、クラスターを手動でシャットダウンする必要なく、大幅なコスト削減を可能にします。
- 管理オーバーヘッドの排除：サーバーレス機能はDatabricks SQLをフルマネージドのサービスに変え、クラスターの容量管理、パッチ適用、アップグレード、およびパフォーマンス最適化の負担を取り除きます。ユーザーは、データとそこに保存されている分析情報だけに集中できるようになります。また、簡素化された価格モデルにより、追跡する請求書は1つだけになり、コストを確認する場所も1つだけになります。
- パフォーマンスの向上：瞬時の起動時間に加えて、SQL Serverlessには、あらゆる分析ユースケースに対するパフォーマンスとコスト最適化機能も満載されています。SQL Serverlessには、業界最高のパフォーマンスを提供する3つの追加機能が付属しています。
- 予測I/Oは、機械学習による最適化を使用して、ポイント読み取りをより高速かつ安価にし、データの更新/削除を驚くほど高速にします。
- インテリジェントワークロード管理は、クエリの負荷に応じてウェアハウス上のクラスターを動的に拡大および縮小し、クエリのパフォーマンスと同時実行性を向上させつつコストを削減します。これは特に、BI用途のためのウェアハウスを最大限に活用するのに役立つだけでなく、混合ワークロードにも利点があります。この機能はSQL Serverlessでのみ利用可能です。
- 強化されたクエリ結果キャッシュは、ワークスペースシステムデータとしてクエリ結果を保持します。つまり、同じワークスペース内の異なるウェアハウスから送信された同一のクエリ（例えば、ダッシュボードの更新など）や、ウェアハウスがシャットダウンした後でも、クエリを再実行することなくクエリ結果キャッシュから提供できることを意味します。これにより、ウェアハウスのコストを削減しながらクエリの遅延を改善します！この機能はSQL Serverlessでのみ利用可能です。
プレビュー中、顧客からの反応は非常に 大きく、多くの顧客が早期に導入し、スケールアップを期待しています。
「GCP上のDatabricks SQL Serverlessに切り替えてから、私たちのユーザーコミュニティは大変喜んでいます。ウェアハウスの即時起動とクエリパフォーマンスの向上により、開発者の作業速度が大幅に向上し、Databricks上の集中データプラットフォームの採用が促進されました。SQL Serverlessは簡単に有効化でき、動的スケーリングにより、高優先度のプロジェクトのコストをすぐに50％以上削減できました...素晴らしいです！」— Micaela Christopher氏、Uplightのデータサイエンスとエンジニアリングのディレクター
SQL Serverlessで新たに導入された機能
GCP上のSQL ServerlessのGAには、多くの新機能も含まれています。これらは、さまざまなワークロードでSQL Serverlessを採用しやすくし、ユーザー体験を向上させるのに役立ちます。
- SQL Execution API：Databricks SQLステートメント実行APIを使用すると、標準的なSQLをHTTP経由で使用して、さまざまなアプリケーション、テクノロジー、およびコンピューティングデバイスとのカスタムデータアプリケーションと統合を構築できます。このAPIは、SQL文をSQLウェアハウスに送信して実行し、結果を取得するためのエンドポイントのセットを提供します。
- Python UDFs：Python UDFsは、ユーザーがPythonコードを書き、それをSQL関数を通じて簡単に安全に完全に管理された方法で呼び出すことを可能にし、Pythonの力をDatabricks SQLにもたらします。
- ノートブックの統合：ノートブック内でSQLウェアハウス（サーバーレスまたはPro SQL）を直接使用します。SQL最適化計算は、標準的なインタラクティブクラスターに対して12倍の価格性能向上を提供します。また、ノートブックを利用して、Gitバックアップ、マルチステートメント、パラメータ化されたSQLを書き、スケジュールすることもできます。
- ワークフローの統合：DatabricksのジョブでSQLタスクタイプを使用し、クエリ、レガシーダッシュボード、アラートなどのDatabricks SQLオブジェクトを含むワークフローを作成、スケジュール、操作、監視できます。例えば、ワークフローはデータを取り込み、データを準備し、Databricks SQLクエリを使用して分析を行い、結果をレガシーダッシュボードに表示することができます。
- Databricks AI/BI：ユーザーのデータのセマンティクスを深く理解し、誰でも自分自身でデータを分析できるようにするために、最初からビジネスインテリジェンス製品として新たに構築されたものが、GCP上でもGAとなりました。さらに、AI/BI Genieという次世代の会話型体験が、ビジネスチームが自然言語を通じてデータと対話するためのもので、近日中にGCPに登場します。
- HIPAA準拠：SQL Serverlessは、利用可能なすべてのGCP地域でもHIPAAに準拠しています。
- AI関数：強力なAI関数を使用して、SQLで直接LLMとMLモデルを活用します。これは内蔵のLLMまたは外部モデル[近日公開]を使用します
利用可能状況と開始方法
SQL Serverless on GCPは7つの地域で利用可能です：us-east1、us-central1、us-west1、us-east4、europe-west2、asia-southeast1、そしてasia-south1。GCP上のSQL Serverlessの使い方は直感的です。
- Databricksのアカウントをお持ちでない場合は、GCPでDatabricksにサインアップしてください。
- Databricks UIでワークスペースを作成し、GCPをクラウドプロバイダーとして選択します。
- 設定が完了したら、SQLクエリを実行し、サーバーレス分析の力を体験できます。
GCP上のSQL Serverlessの一般提供は、データ分析を簡素化し、組織がデータの全潜在能力を引き出すという私たちの使命を進める重要な進歩です。お客様がこの新機能をどのように活用してイノベーションを推進し、ビジネス目標を達成するかを見るのが楽しみです。詳細については、ドキュメントをご覧いただくか、サポートチームにお問い合わせください。
私たちの旅に参加頂き、感謝します！
