Delta Sharing: Die Top 10 der am häufigsten gestellten Fragen beantwortet – Teil 1

Delta Sharing verzeichnet eine unglaubliche Dynamik mit einem Wachstum der aktiven Freigaben von 300 % im Vergleich zum Vorjahr. Dabei handelt es sich nicht nur um einmalige Dateiübertragungen, sondern um eine dauerhafte, kontinuierliche Zusammenarbeit, die beweist, dass echter Wert ausgetauscht wird.

Ein Schlüsselfaktor für dieses Wachstum ist die offene Philosophie der Plattform. Delta Sharing ermöglicht es Kunden, jedes Daten- und KI-Asset nahtlos mit jedem zu teilen. 40 % der aktiven Freigaben von Delta Sharing erfolgen an Empfänger außerhalb des Databricks-Ökosystems. Dies zeigt, dass Delta Sharing ein offenes Ökosystem für die Zusammenarbeit antreibt, das sich über Plattformen und Clouds hinweg erstreckt.

In diesem Beitrag haben wir die 10 am häufigsten gestellten Fragen zu Delta Sharing zusammengestellt. Lesen Sie weiter, um einen Überblick zu erhalten, warum es sich unterscheidet, was die häufigsten Anwendungsfälle sind und was Sie für den Einstieg benötigen.

1. Was ist Delta Sharing?

Delta Sharing ist das am weitesten verbreitete offene Protokoll für den sicheren Datenaustausch. Es ermöglicht Unternehmen, Live-Daten und KI-Assets plattform- und cloudübergreifend auszutauschen.

2. Was macht Delta Sharing so besonders?

Die meisten Sharing-Tools zwingen Sie dazu, Daten an ein neues Ziel zu kopieren, was zu veralteten Datensilos führt und Ihre Angriffsfläche vergrößert. Delta Sharing ermöglicht es Ihnen, Live-Daten direkt an der Quelle zu lesen, sodass nichts verschoben oder dupliziert werden muss.

Zweitens ist Delta Sharing, da es Open Source ist, nicht an ein einzelnes Ökosystem gebunden. Sie können Daten aus Ihrem Databricks Lakehouse oder von anderswo freigeben, und die Empfänger können die Daten nutzen, unabhängig davon, ob sie Databricks verwenden oder nicht.

Schließlich verbinden sich die Empfänger über standardmäßige, offene Konnektoren wie Python, Apache Spark, Java, Power BI und andere, um die von Ihnen autorisierten freigegebenen Tabellen zu lesen.

Zusammenfassend bietet Delta Sharing eine plattformunabhängige Zusammenarbeit für Daten und KI über Teams, Tools und Clouds hinweg. Sie können ohne Anbieterbindung, ohne Kopien und ohne Governance-Lücken arbeiten.

3. Funktioniert Delta Sharing mit Iceberg? Wenn ich Apache Iceberg verwende, wie kann ich Delta Sharing nutzen?

Ja, Delta Sharing ist vollständig mit Apache Iceberg kompatibel. Mit der Entscheidung für Delta Sharing erhalten Sie das Beste aus beiden Welten: Zugriff auf das größte Ökosystem für Zusammenarbeit, bei dem Apache Iceberg nahtlos als Datenquelle und -ziel fungiert, während Sie gleichzeitig die volle Leistung von Delta Sharing nutzen.

Delta Sharing macht das Teilen zu einer Kernfunktion erster Klasse in Iceberg. Mit einzigartigen Funktionen wie der OIDC-Token-Federation, die es offenen Empfängern ermöglicht, sich mit benutzerdefinierten IdPs zu authentifizieren, und dem Network Gateway, das die Netzwerkkonfiguration vereinfacht und skaliert, erschließen Kunden die volle Interoperabilität über Tabellenformate hinweg.

In Unity Catalog verwaltete Tabellen können jetzt mit Iceberg-Clients wie Snowflake, Trino und Spark geteilt werden. Darüber hinaus können externe Iceberg-Tabellen, die von Katalogen wie Hive Metastore oder AWS Glue verwaltet werden, in Unity Catalog föderiert und dann über dasselbe Protokoll freigegeben werden. In beiden Fällen registrieren Sie die Tabellen in Unity Catalog, erstellen eine Freigabe und fügen die entsprechenden Empfänger hinzu – unabhängig davon, ob sie Databricks nutzen oder nicht. Dies stellt sicher, dass Iceberg-Benutzer mit Databricks-Kunden auf der Grundlage von verwalteten Live-Daten zusammenarbeiten können – ohne diese zu verschieben oder zu duplizieren.

4. Kann ich Delta Sharing verwenden, um Daten mit Benutzern zu teilen, die keine Databricks-Kunden sind?

Ja, Sie können Daten mit all Ihren Empfängern teilen, unabhängig davon, ob diese Databricks oder eine andere Plattform nutzen. Delta Sharing ist ein offenes Protokoll, das sowohl für das Databricks-to-Databricks-Sharing als auch für das Open Sharing funktioniert. Delta Sharing bietet offene Konnektoren, die Empfänger auf jeder Plattform nutzen können, darunter einen Apache Spark-Konnektor, einen Pandas-Konnektor, einen Iceberg Rest Catalog-Konnektor sowie Konnektoren für PowerBI, Tableau und Excel. Mit Open Sharing können Sie nicht nur Tabellen, sondern auch Ansichten, Partitionen und Change Data Feeds freigeben, sodass Sie Ihren Datenaustausch auch bei externer Freigabe optimieren können.

5. Warum sollte man Delta Sharing nutzen? Welche Probleme löst es?

Wir haben uns angesehen, wie Tausende von Kunden Delta Sharing nutzen, und vier Hauptbereiche identifiziert, in denen es für ihr Unternehmen einen echten Unterschied macht.

6. Wenn ich bereits Daten über SFTP, S3, Dropbox oder E-Mail teile, warum brauche ich dann Delta Sharing?

Wenn Sie Daten immer noch über SFTP, S3, Dropbox oder E-Mail teilen, setzen Sie Ihr Unternehmen unnötigen Risiken und Ineffizienzen aus. Sehen Sie sich an, was bei Finastra passiert ist, wo Angreifer eine SFTP-Schwachstelle ausnutzten und rund 400 GB an sensiblen Daten stahlen.

Diese altmodischen Methoden funktionieren zwar vielleicht, sind aber veraltet und fehleranfällig. Am Ende kopieren Sie ganze Dateien, hantieren mit statischen Passwörtern oder Schlüsseln, die nie ablaufen, und erstellen unzählige nicht synchrone Kopien, was erhebliche Sicherheits- und Compliance-Lücken aufreißt. Delta Sharing ersetzt all das durch einen modernen, sicheren und überprüfbaren Ansatz. Sie können genau die Tabellen, Zeilen oder Spalten freigeben, die jemand benötigt (ebenso wie KI-Modelle), und der Empfänger sieht immer die neueste Version, da keine zusätzliche Kopie im Umlauf ist.

Auch die Sicherheit ist höher. Anstatt statische Passwörter oder Zugriffsschlüssel zu verteilen, vergibt Delta Sharing kurzlebige Token und lässt sich in Ihr bestehendes Identitätssystem integrieren, sodass Sie keine separaten Anmeldedaten verwalten müssen. Jeder Zugriff auf die Daten wird in Unity Catalog protokolliert, was Audits und Compliance erheblich vereinfacht.

Wenn es Ihnen mit dem Schutz sensibler Daten und der Vereinfachung der Zusammenarbeit ernst ist, ist Delta Sharing kein „Nice-to-have“, sondern der heutige Standard für sicheren Datenaustausch.

Erfahren Sie mehr unter Wie Kythera Labs, ein Databricks Built-On Partner, mit Delta Sharing jährlich über 2 Mio. USD einspart

7. Welche Arten von Assets kann ich mit Delta Sharing teilen?

Mit Delta Sharing können Sie fast jede Art von Daten- oder KI-Asset teilen, und diese Vielfalt ist wirklich einzigartig. Dazu gehören Tabellen (und Tabellenpartitionen), Streaming-Tabellen, verwaltete Iceberg-Tabellen, externe Schemata und Tabellen, Sichten (einschließlich dynamischer Sichten für Zeilen-/Spaltenfilterung), materialisierte Sichten, Volumes, Notebooks und KI-Modelle. Wenn Sie ein gesamtes Schema (eine Datenbank) freigeben, wird alles darin (Tabellen, Sichten, Volumes, Modelle) sofort geteilt, und alle später hinzugefügten neuen Assets stehen den Empfängern ebenfalls zur Verfügung. Alle diese Assets sind mit einem einzigen Unity Catalog Metastore verknüpft, was die Freigabe übersichtlich und organisiert hält.

8. Wie sorgt Delta Sharing für die Datensicherheit, wenn ein Anbieter Daten mit einem Empfänger teilt?

Delta Sharing nutzt einen tokenbasierten Zero-Trust-Ansatz. Wenn jemand Daten anfordert, prüft der Sharing-Server Unity Catalog und gibt dann ein kurzlebiges, schreibgeschütztes Token oder eine vorab signierte URL aus, die direkt auf den Speicher verweist. So verlassen niemals dauerhafte Passwörter den Anbieter. Der gesamte Datenverkehr ist mit einer TLS-Verschlüsselung geschützt, und jede Anfrage wird für Audits protokolliert. Bei Databricks-zu-Databricks-Verbindungen wird der Handshake automatisch abgewickelt. Externe Benutzer können sich mit einfachen Anmeldedateien oder einer OIDC-Federation authentifizieren, aber es gilt dasselbe verschlüsselte und vollständig überprüfte Modell mit temporären Token. Dies stellt sicher, dass nur die richtigen Personen die richtigen Daten sehen können, und das auch nur für begrenzte Zeit. Lesen Sie Wie Delta Sharing eine sichere End-to-End-Zusammenarbeit ermöglicht, um mehr zu erfahren.

9. Das klingt gut. Welche Auswirkungen hat die Nutzung von Delta Sharing auf die Kosten?

Der Einstieg in Delta Sharing kostet keinen Cent – es fallen keine Gebühren für die Einrichtung, Konfiguration oder Freigabe eines Datensatzes oder KI-Modells an. Eine Rechnung erhalten Sie erst, wenn tatsächlich jemand die Daten abfragt, und selbst dann lassen sich die Gebühren in drei klare Bereiche unterteilen.

Erstens werden die Compute-Kosten (die für die Ausführung der Abfrage erforderliche Rechenleistung) in der Regel von der Person getragen, die die Abfrage durchführt. Der Dateneigentümer kann sich jedoch dafür entscheiden, diese zu übernehmen, wenn das sinnvoller ist.

Zweitens fallen Egress-Kosten für den Datentransfer aus der Cloud des Anbieters an. Der neuere R2-Modus (jetzt GA) bietet sogar eine „Zero-Egress“-Option, sodass Sie diese Gebühr komplett vermeiden können.

Drittens spielen Speicherkosten nur dann eine Rolle, wenn Sie sich dafür entscheiden, eine replizierte Kopie aufzubewahren – der direkte Live-Zugriff erfordert keinen zusätzlichen Speicherplatz.

Hier ist ein Beispiel für eine Freigabe von Databricks zu Databricks: Stellen Sie sich vor, ein Lieferant auf AWS teilt eine materialisierte Sicht mit einem Einzelhändler auf Azure. Wenn die Daten geteilt werden, zahlt der Lieferant die Egress-Kosten für Daten, die AWS verlassen. Wenn der Einzelhändler eine Abfrage auf den geteilten Daten ausführt, zahlt der Einzelhändler die Compute-Kosten für die Abfrage.

10. Was benötige ich, um Delta Sharing zu nutzen?

Die Anforderungen hängen davon ab, ob Sie Daten mit einem Databricks-Empfänger oder einem Nicht-Databricks-Empfänger teilen.

• Databricks-to-Databricks (D2D): Dieses Modell dient dem Teilen von Daten zwischen Databricks-Workspaces. Sowohl der Anbieter als auch der Empfänger benötigen einen Unity Catalog Metastore, um die geteilten Daten zu verwalten. Lesen Sie, wie Aon Reinsurance Solutions Databricks Delta Sharing nutzt, um bessere Entscheidungen zu treffen
• Databricks-to-Open (D2O): Dieses Modell dient dem Teilen von Daten aus einem Databricks-Workspace mit beliebigen externen Tools oder Plattformen. Der Anbieter benötigt einen für Unity Catalog aktivierten Workspace, und der Empfänger kann die Verbindung über offene Connectoren wie Spark, Pandas oder Power BI herstellen. Erfahren Sie, wie die 3D-Druck-Sparte von HP es Kunden ermöglicht, die Geräteleistung mithilfe von D2O nahezu in Echtzeit zu überwachen

Die externe Freigabe muss aktiviert sein, und Unternehmen sollten die Governance sowie potenzielle cloudübergreifende Egress-Kosten im Blick behalten.

Bereit für den Einstieg?

• Lesen Sie die Delta Sharing-Dokumentation, um mit Delta Sharing zu beginnen
• Sehen Sie sich das Video Delta Sharing in Action: Architecture and Best Practices vom Data and AI Summit 2025 an
• Sehen Sie sich das Video Securing Data Collaboration: A Deep Dive Into Security, Frameworks, and Use Cases vom Data and AI Summit 2025 an, um mehr über die Sicherheit, Frameworks und Anwendungsfälle von Delta Sharing zu erfahren

Seien Sie gespannt auf die nächste Fragerunde, in der wir Themen wie Sicherheit, die Unterstützung von Produkten wie Clean Rooms und dem Databricks Marketplace durch Delta Sharing sowie weitere erweiterte Funktionen untersuchen werden.

(Dieser Blogbeitrag wurde mit KI-gestützten Tools übersetzt.) Originalbeitrag