Ankündigung der Public Preview für plattformübergreifendes Teilen von Ansichten

Wir freuen uns, die Public Preview für plattformübergreifendes Teilen von Ansichten (Cross-Platform View Sharing) anzukündigen. Ab heute verfügbar, ermöglicht es Datenanbietern, Ansichten über verschiedene Plattformen, Clouds und Regionen hinweg zu teilen und so ein offenes und interoperables Daten-Ökosystem zu fördern.

Das Teilen von Ansichten war schon immer nützlich; andere Anbieter tun dies ebenfalls. Aber bisher war es meist auf dieselbe Plattform beschränkt. Sie konnten Ansichten innerhalb einer Plattform teilen, aber nicht über mehrere Plattformen und Clouds hinweg. Databricks löst dieses Problem mit dem plattformübergreifenden Teilen von Ansichten und ermöglicht es Ihnen, Ansichten nahtlos über verschiedene Umgebungen hinweg freizugeben. Dies ist ein echter Game Changer, da es die Reichweite von Datenanbietern vergrößert, einen Vendor-Lock-in für Datenkonsumenten verhindert und die Zusammenarbeit einfacher und schneller macht.

Das plattformübergreifende Teilen steht im Einklang mit der Open-Sharing-Vision von Databricks, indem es einen sicheren und nahtlosen Datenaustausch über verschiedene Plattformen, Clouds und Regionen hinweg ermöglicht.

Das Teilen von Ansichten verstehen

Um das Teilen von Ansichten zu verstehen, wollen wir uns zunächst mit Ansichten (Views) befassen. In Databricks sind Ansichten schreibgeschützte Darstellungen von Daten, die aus Tabellen oder anderen Ansichten erstellt wurden. Sie speichern den Abfragetext, nicht jedoch die Daten selbst. Ansichten sind Teil des Unity Catalog

Das Teilen von Ansichten ermöglicht es Benutzern, Ansichten über das Delta Sharing-Protokoll freizugeben. Delta Sharing ist das branchenweit erste offene Protokoll für sicheres Datensharing, das es einfach macht, Daten mit anderen Organisationen zu teilen – unabhängig davon, welche Datenplattformen diese nutzen. Das Teilen von Ansichten fördert die Wiederverwendbarkeit und reduziert Redundanz, da mehrere Benutzer auf dieselben Ansichten für Analysen zugreifen und diese nutzen können.

Zuvor konnten Konsumenten eine Ansicht, die zwischen Databricks-Konten geteilt wurde, nur mit Databricks Serverless SQL abfragen. Databricks Serverless SQL funktioniert auf allen drei großen Cloud-Anbietern: AWS, Azure und Google Cloud Platform (GCP), sodass Ansichten cloudübergreifend geteilt werden konnten.

Mit dem plattformübergreifenden Teilen von Ansichten können Datenkonsumenten nun jede Art von Databricks-Cluster nutzen oder sogar offene Delta Sharing-Clients verwenden, um auf geteilte Ansichten zuzugreifen und diese abzufragen. Offene Delta Sharing-Clients sind Tools oder Plattformen, die das Delta Sharing-Protokoll unterstützen und es Benutzern ermöglichen, auf geteilte Ansichten zuzugreifen, ohne Databricks nutzen zu müssen. Zu diesen Clients gehören beliebte Systeme wie Apache Spark™, Pandas, Power BI, Tableau und andere. Dies macht es für plattformübergreifende Benutzer (d. h. diejenigen, die nicht auf Databricks sind) möglich, über Delta Sharing weiterhin auf die geteilten Ansichten zuzugreifen und diese abzufragen.

Sehen wir uns diese Demo an, um das plattformübergreifende Teilen von Ansichten in Aktion zu erleben

Anwendungsfälle

Databricks-to-Databricks-Sharing (D2D)

In diesem Szenario können zwei Databricks-Kunden Ansichten nahtlos innerhalb des Databricks-Ökosystems teilen. Warum ist das wichtig? Organisationen arbeiten mit Partnern zusammen, die sich möglicherweise in verschiedenen Clouds und Regionen befinden, und möchten Ansichten mit Kunden/Partnern über Clouds und Regionen hinweg teilen. Durch die Nutzung der Delta Sharing-Technologie können sie Ansichten nahtlos und sicher teilen, ohne Duplikate der Daten zu erstellen.

Databricks-to-Open-Sharing (D2O)

In diesem Szenario können Databricks-Kunden Ansichten mit externen Empfängern teilen, die Databricks nicht nutzen. Das plattformübergreifende Teilen von Ansichten unterstützt offene Konnektoren (wie Apache Spark™, Pandas, Power BI, Tableau usw.), sodass Empfänger über das Delta Sharing-Protokoll auf geteilte Ansichten zugreifen können. Diese Funktion ist besonders vorteilhaft für Business-Analysten und Fachbereichs-Anwender (Line of Business Users), die einen vereinfachten Zugriff auf Daten benötigen, ohne direkt mit komplexen Datenplattformen interagieren zu müssen

Datenanbieter im Databricks Marketplace profitieren vom plattformübergreifenden Teilen von Ansichten, indem sie ihre Marktreichweite und Monetarisierungsmöglichkeiten erheblich erweitern. Diese Funktion ermöglicht es ihnen, Ansichten mit einem breiteren Publikum zu teilen, einschließlich Kunden, die Databricks nicht nutzen, und so ihren potenziellen Kundenstamm zu vergrößern. Datenkonsumenten sind nicht darauf beschränkt, Ansichten über die Databricks-Plattform abzufragen, wodurch ein Lock-in-Effekt bei Databricks vermieden wird.

Das plattformübergreifende Teilen von Ansichten ist ein echter Game Changer für unsere Kunden. Um Zero-Copy-Datensharing in komplexen Unternehmen in großem Maßstab einzuführen, ist Flexibilität erforderlich. Die Möglichkeit, Ansichten plattformübergreifend zu teilen, ermöglicht es uns, die Sicherheits- und Leistungsvorteile von Delta Sharing mehr Kunden bereitzustellen und ihnen zu helfen, schneller Wertschöpfung aus ihren Kundendaten zu generieren— Derek Slager, CTO und Mitgründer von Amperity

Ausblick

In den kommenden Monaten können Leser erwarten, dass Databricks mehrere fortschrittliche Datasharing-Funktionen einführt. Zu den kommenden Funktionen gehört Sharing für Lakehouse Federation, das es Datenanbietern ermöglicht, Daten direkt von verschiedenen Plattformen (z. B. Amazon Redshift, Azure Synapse, Google BigQuery, Snowflake) ohne Replikation zu teilen.

Darüber hinaus wird der D2O-OAuth-Support die Sicherheit erhöhen, indem Empfänger sich mit OAuth-Tokens von ihren vertrauenswürdigen Identity Providers (IdPs) authentifizieren können. Zudem wird das Teilen von materialisierten Ansichten und Delta Live Tables eine effiziente Verteilung von im Voraus berechneten Abfrageergebnissen und Streaming-Daten ermöglichen, was für aktuelle Daten bei besserer Leistung und geringeren Kosten sorgt.

Erste Schritte

Das plattformübergreifende Teilen von Ansichten ist ab heute als Public Preview für AWS-, GCP- und Azure-Kunden verfügbar. Erfahren Sie, wie Sie das offene Delta Sharing-Protokoll nutzen können, um Daten aus Ihrem Unity Catalog-fähigen Databricks-Workspace mit jedem Benutzer auf jeder Computing-Plattform an jedem Ort zu teilen.

(Dieser Blogbeitrag wurde mit KI-gestützten Tools übersetzt.) Originalbeitrag