Databricks × AWS：インフラのセトアップを驚くほど簡単に！

本日、AWS におけるクラシック workspace デプロイの自動構成が一般提供されたことをお知らせします。顧客は Databricks アカウントコンソールから直接、新しいWorkspaceを数分でデプロイできるようになりました。AWS IAM の一時的な委任を活用したこの新しいフローはインフラストラクチャのセットアップを自動化し、顧客がデータ インテリジェンスの構築に一層集中できるようにします。

Databricks on AWSは、前例のないペースで急成長しています。この成長が加速するにつれ、顧客はクラウド管理ではなく、データインテテリジェンスに集中したいと明確に表明されています。

以前は、AWS上でDatabricks workspaceをセットアップするには、クラウド管理者がDatabricksとAWSの両方でインフラストラクチャを手動で設定する必要があり、最大1時間かかっていました。

DatabricksとAWSは提携し、顧客のオンボーディングのあらゆるステップを簡素化しました。昨年の AWS re:Invent では、AWS Marketplace のオンボーディングを効率化する SaaS Quick Launch と、調達を迅速化する Buy with AWS を発表しました。

このブログでは、以下の内容について説明します。

• 自動設定がAWS IAMの一時的な委任とどのように連携するか
• 新しいフローを使用したworkspaceのセットアップ方法

自動設定の仕組み

クラシック Databricks Workspace をデプロイするには、顧客は AWS の認証情報を提供して、EC2 コンピュートと S3 ストレージリソースをプロビジョニングおよび管理する必要があります。以前は、クラウド管理者が 140 行を超える JSON ポリシーで IAM ロールを手動で作成し、S3 バケットを設定して VPC ネットワーキングをセットアップするという、最大 1 時間かかるプロセスが必要でした。

今では、わずか数クリックで完了できるようになりました。

ここでは何が起きているのでしょうか？

AWS IAMの一時的な委任を利用して、ユーザーがworkspaceの作成中に「自動的に追加」を選択すると、Databricksは必要なすべてのリソースを自動的にプロビジョニングします。

コンピュート資格情報

• クラシックコンピュートのアクセスとライフサイクル管理のための、スコープ指定された権限と適切な信頼ポリシーを持つクロスアカウントIAMロール
• デフォルトのサブネット、セキュリティグループ、ルーティングテーブルを含む、お客様が管理するVPC

ストレージ資格情報

• 適切に設定されたアクセス ポリシー を持つ S3 バケット
• Unity CatalogにS3バケットへの最小権限のアクセスを付与する、個別のIAMロール
• マネージド ファイル イベントは、効率的なデータ処理ができるように自動で有効化されます。

委任された権限の確認：

AWSにログインすると、一時的なデリゲーション連携により、ユーザーのAWS権限がクラシックworkspaceの作成に必要な権限と照合されます。

• 十分なアクセス権を持つユーザーは、必要なすべてのAWSリソースを自動的にプロビジョニングするための一時的な権限（指定された期間）をDatabricksに付与します。そうでない場合、同じフロー内でAWSアカウント管理者に必要な権限をリクエストできます。
• 委任されたすべての権限は期間限定であり、デプロイ後に自動的に失効するため、常時アクセスとセキュリティリスクが軽減されます。顧客は、リソースが作成される前に、必ずAWSコンソールでリクエストされた権限を確認し、承認します。

自動構成の主なメリット

• よくあるエラーを排除: 自動プロビジョニングにより、信頼ポリシーの誤り、S3権限の欠落、IDの設定ミスといった間違いを防ぎます。
• 組み込みの承認ワークフロー：必要な権限を持たないユーザーは、AWSアカウントの管理者にリクエストできるため、従来のworkspace作成における最も一般的な失敗がなくなります。
• デフォルトでの最小権限のセキュリティ：すべてのIAMロールは、企業のセキュリティポリシーに沿ったスコープの権限と境界を持ち、最小権限の原則に従います。
• 管理対象ファイルイベントが有効： Autoloader で効率的にデータを処理できるように自動で設定されます。
• 顧客管理VPCがdefault： すべてのworkspaceは、顧客管理VPCにデプロイされ、デプロイ後にエンタープライズセキュリティ機能を追加するオプションがあります。
• 完全な監査証跡： すべての自動化されたアクションはAWS CloudTrailに記録され、作成されたリソースを完全に可視化できます。

詳しく見る

新しい認証情報を使用して新しいクラシックworkspaceを作成したい場合は、Databricksアカウントコンソールに移動し、新しい自動設定デプロイエクスペリエンスを今すぐお試しください。開始するには、「Workspace」tabから「Create Workspace」をクリックします。

Databricksを初めてお使いの場合は、トライアルにお申し込みください。

詳細情報

• workspaceのデプロイオプションに関する詳細
• 追加情報: AWS IAMの一時的なデリゲーション

ラスベガスのベネチアンで12月1日から5日まで開催される AWS Reinvent にぜひご参加ください！主要な組織がAWSでデータモダナイゼーションの取り組みをどのように加速させているかを学び、最新のイノベーションを実践的に体験してください。