Le partage ouvert et indépendant de données et d'actifs AI, combiné aux applications partenaires sur le Marketplace, alimente un vaste écosystème de collaboration et de partenariats.
par Akram Chetibi, Harish Gaur, Huey Han, Tia Chang, Mengxi Chen, Lin Zhou et DJ Sharkey
Delta Sharing est désormais OpenSharing, avec des améliorations majeures, notamment le partage de nouveaux actifs AI, l'interopérabilité Iceberg et le partage multi-cloud transparent.
Les applications sur Marketplace permettent aux clients d'exécuter des applications conçues par des partenaires au sein de votre environnement Databricks, sans aucun mouvement de données ni longs examens de sécurité.
Les clients peuvent désormais acquérir des données tierces et des produits AI en utilisant les Databricks universal commits existants.
Aujourd'hui, nous lançons trois vagues d'innovation qui élargissent fondamentalement la notion de partage et de collaboration sur la plateforme Databricks. Que vous soyez un fournisseur de données cherchant à monétiser l'intelligence, un consommateur déployant des applications partenaires sans déplacer le moindre octet, ou une équipe plateforme partageant des données et des actifs d'IA à travers différents clouds et formats de données, les annonces ci-dessous s'adressent à vous. Découvrons cela en détail.
Il y a cinq ans, nous avons été les pionniers du partage ouvert et de la collaboration avec le protocole Delta Sharing — c'est désormais le protocole ouvert le plus largement adopté pour le partage sécurisé de données sans copie (zero-copy), utilisé par des milliers d'entreprises. Sur cette lancée, nous avons annoncé la semaine dernière OpenSharing, la nouvelle évolution de Delta Sharing. OpenSharing, désormais un projet de la Linux Foundation, introduit le premier protocole ouvert et indépendant des fournisseurs pour partager en toute sécurité des actifs d'IA, y compris des compétences d'agent, des modèles d'IA et des données non structurées.

OpenSharing sur Databricks s'accompagne de plusieurs nouvelles fonctionnalités organisées autour de quatre piliers :
OpenSharing prend en charge tous les formats.

Partage client ouvert haute performance (GA) : Bénéficiez de performances de requête de premier ordre prêtes à l'emploi grâce aux identifiants de stockage cloud fournis par OpenSharing lors du partage avec des clients de l'écosystème ouvert, notamment SAP Databricks et Snowflake.

Partage de tables Lakebase et de Lakebase CDF (Public Preview) : Partagez des données opérationnelles en temps réel dans Lakebase — ainsi que son flux de données de modification (CDF) — avec n'importe quel client. Aucun ETL, aucun pipeline requis.

Partager des tables Iceberg externes (GA bientôt disponible) : Partagez des tables directement depuis AWS Glue, Snowflake Open Catalog ou tout autre catalogue implémentant la spécification REST d'Iceberg.

Partagez plus que des tables — partagez de l'intelligence.
Partage d'agent Genie (Beta) : Partagez des expériences de chat IA en langage naturel avec des partenaires externes, en leur offrant un accès conversationnel et structuré à vos données pour accélérer l'obtention d'insights.

Connectez-vous n'importe où, répliquez partout, payez moins.
SecureConnect (Public Preview) : Connectez instantanément vos stockages sur différents clouds sans règles de pare-feu complexes ni configurations DNS. Une connectivité sécurisée en un clic entre les stockages AWS, Azure et GCP. En savoir plus dans le blog.

Distribution mondiale (Private Preview) : Minimisez les frais de sortie de données (egress) et améliorez les performances des requêtes grâce à la réplication automatique inter-régions et inter-clouds.

Partage entre domaines réglementaires (Public Preview) : Partagez des données entre environnements Databricks au-delà des frontières réglementaires, notamment entre AWS GovCloud/GovCloud DoD et les clouds commerciaux américains, entre AWS GovCloud et AWS GovCloud DoD, ainsi qu'entre Azure China et les clouds commerciaux.

Un partage simple à configurer et efficace à consommer.
Partage par e-mail (bientôt disponible) : Invitez n'importe quel collaborateur en saisissant simplement son adresse e-mail. Databricks envoie l'invitation et s'occupe du reste.

Prise en charge du CDF pour les vues partagées (Private Preview) : Consommez le flux de données de modification (CDF) — insertions, mises à jour et suppressions — sur les vues partagées pour détecter et analyser efficacement les changements.

La résolution d'identité avec des partenaires de premier plan est désormais disponible dans Databricks Clean Rooms. Plutôt que d'envoyer des données sensibles à un tiers, les clients peuvent mettre en place une clean room avec des partenaires d'identité tels que LiveRamp, Acxiom, TransUnion et d'autres pour rapprocher leurs données first-party dans leur lakehouse avec les graphes d'identité des partenaires – tout en protégeant leurs données first-party sous-jacentes. Propulsé par OpenSharing et gouverné par Unity Catalog, ce processus n'implique aucun mouvement de données, et les partenaires ne voient jamais les enregistrements clients bruts. Résultat : les équipes peuvent associer des points de contact fragmentés à un identifiant durable et créer un profil client plus riche.

Les applications tierces sont désormais disponibles sur Databricks Marketplace. Pour la première fois, les clients peuvent découvrir, déployer et exécuter des applications conçues par des partenaires directement au sein de leur environnement Databricks, sans mouvement de données, sans infrastructure distincte et sans tracas d'intégration.
Les applications sur Marketplace réduisent la distance entre « trouver une solution » et « l'exécuter en production ». Les clients restent au sein de leur espace de travail Databricks gouverné tout en accédant aux meilleures fonctionnalités de leur catégorie, développées par des experts du domaine. Les fournisseurs bénéficient d'une distribution instantanée auprès de l'ensemble de la base de clients Databricks, sans avoir à développer d'intégrations personnalisées.
Plus de 20 partenaires de lancement couvrent les services financiers, la santé, la publicité, le marketing et l'analyse, notamment Meta, Capital One, The Trade Desk, Slalom, Stagwell, Integral, Acxiom, Amperity, Bright Data, Datavant, Adstra, Aimpoint Digital, Celebal Tech, Cotality, LakeFusion, Opsera, Prometheux, Reflex, Spindle Health, Tier One Analytics et Zeb.
Pour en savoir plus, consultez ce blog d'annonce

La déduction des engagements Marketplace permet aux clients d'acquérir des données tierces et des solutions AI directement depuis Databricks Marketplace en utilisant leurs engagements universels Databricks existants — ce qui accélère l'approvisionnement et élimine les frictions budgétaires.

Découvrez ces innovations en direct au Data + AI Summit (du 15 au 18 juin, San Francisco). Des analyses approfondies des produits aux témoignages de clients tels que Pfizer, Amadeus, Chevron, McKesson et bien d'autres, nous proposons plus de 20 sessions dans le parcours Data Sharing & Collaboration. Explorez l'agenda complet.
(Cet article de blog a été traduit à l'aide d'outils basés sur l'intelligence artificielle) Article original
Abonnez-vous à notre blog et recevez les derniers articles directement dans votre boîte mail.