Présentation de Lakebridge : Migration de données gratuite et ouverte vers Databricks SQL

Nous sommes ravis de présenter Lakebridge, un outil de migration gratuit qui simplifie et accélère les migrations d'entrepôts de données d'entreprise (EDW) vers Databricks SQL.

La modernisation des entrepôts de données hérités et cloisonnés est essentielle pour que de nombreuses organisations puissent obtenir des informations plus rapides, réduire les coûts et consolider les charges de travail d'analyse et d'IA sur la plateforme unifiée et ouverte de Databricks. Cependant, les migrations sont souvent considérées comme risquées : le code SQL hérité est complexe, les dépendances sont cachées et la documentation est rare. La validation de la logique traduite, la garantie de la qualité des données et le rapprochement de milliers de scripts SQL et de procédures stockées peuvent ralentir même les équipes les plus engagées.

Lakebridge aide à surmonter ces défis en automatisant jusqu'à 80 % du processus de migration — y compris le profilage, la conversion SQL, la validation et le rapprochement — afin que les équipes puissent avancer en toute confiance.

Modernisez pendant que vous migrez avec Lakebridge

Databricks SQL est l'entrepôt de données qui connaît la croissance la plus rapide de l'industrie, reconnu pour son rapport prix/performance, son efficacité et ses informations basées sur l'IA. Alors que de plus en plus d'organisations choisissent Databricks comme base pour leur architecture de données ouverte et flexible, Lakebridge garantit que les migrations ne sont plus un goulot d'étranglement mais un avantage stratégique.

• Vision claire de la portée et de la complexité de la migration
• Conversion et validation de code automatisées et de haute fidélité
• Rapprochement facile des charges de travail migrées pour l'exactitude des données
• Un chemin éprouvé pour accélérer votre parcours vers Databricks SQL

Lakebridge prend en charge les approches de migration lift-and-shift et hybrides. Avec l'approche hybride, vous n'avez pas à tout moderniser dès le premier jour — vous pouvez construire sur une base stable tout en vous alignant sur les exigences futures.

Migrations rapides et prévisibles vers Databricks 

Construit par des ingénieurs de terrain et des praticiens expérimentés qui comprennent les défis des migrations à grande échelle, Lakebridge aborde la complexité des systèmes hérités avec une approche moderne axée sur l'automatisation. De plus, Lakebridge est extensible, permettant aux partenaires Databricks de collaborer, de contribuer des fonctionnalités et d'améliorer l'outil pour répondre aux divers besoins de migration.

Lakebridge offre une expérience de migration complète et de bout en bout grâce à trois composants clés :

• Analyseur : Effectue une évaluation détaillée de votre environnement d'entrepôt de données hérité.
• Convertisseur : Convertit intelligemment les flux ETL hérités et les scripts SQL — y compris les procédures stockées — en code Databricks SQL ou Spark SQL performant et compatible.
• Validateur : Garantit l'exactitude et la correction des données grâce à des outils de rapprochement intégrés.

Lakebridge fournit également des tableaux de bord et des rapports intégrés directement dans Databricks pour assurer la transparence et le contrôle pendant les migrations. Ces vues permettent aux équipes de suivre les progrès, de valider les résultats et de mieux comprendre leur paysage de données en évolution, accélérant ainsi l'adoption et offrant de la valeur plus rapidement.

Avec ces fonctionnalités, Lakebridge automatise jusqu'à 80 % des tâches de migration, aidant les équipes à accélérer les délais des projets jusqu'à 2 fois. Aujourd'hui, Ladebridge prend en charge plus de 10 entrepôts de données hérités, et de nombreux autres seront bientôt disponibles.

Meilleure planification de la migration

Lakebridge réduit l'incertitude de votre projet de migration en fournissant des informations précoces et détaillées sur votre environnement hérité grâce à son outil d'analyse intégré. Il analyse les métadonnées et le code hérité pour générer des rapports à onglets multiples qui répertorient tous les objets nécessitant une migration, tels que les tables, les vues, les travaux ETL et les procédures stockées, et classent les charges de travail par complexité, de faible à moyenne, complexe et très complexe.

Ces informations permettent aux équipes de définir la portée précise des projets, de prioriser en fonction de l'impact commercial et de planifier en toute confiance des migrations par phases. En identifiant les défis potentiels à un stade précoce, Lakebridge contribue à assurer une exécution plus fluide, une meilleure planification des ressources et des tests d'acceptation utilisateur plus efficaces — rendant finalement la transition vers Databricks plus prévisible et gérable.

Solution de migration complète

Lakebridge est conçu pour gérer des migrations d'entreprise complexes dans le monde réel, offrant des capacités robustes en matière d'outillage, de couverture des sources et d'automatisation.

• Large prise en charge des sources : Migrez à partir de plus de 10 entrepôts de données et outils ETL leaders, y compris Teradata, Snowflake, Oracle, SQL Server, et plus encore. Des connecteurs supplémentaires sont disponibles en aperçu privé et sont ajoutés en continu. Contactez votre équipe commerciale pour en savoir plus.
• Boîte à outils éprouvée : Lakebridge intègre la technologie éprouvée de BladeBridge — un moteur de migration approuvé par des intégrateurs de systèmes tels qu'Accenture, Capgemini, Celebal Technologies et Tredence. Ces outils ont permis des centaines de migrations réussies, y compris l'analyse SQL avancée, la conversion de code et la validation.
• Flux de travail de bout en bout : De la découverte et de l'évaluation des charges de travail à la conversion du code et à la validation des données, Lakebridge couvre toutes les étapes du cycle de vie de la migration. Des outils tels que Code Converter et Data Validator garantissent l'intégrité et les performances tout au long du processus.
• Résultats éprouvés et prévisibles : Construit sur une technologie adoptée par les principales entreprises et partenaires, Lakebridge aide les équipes à respecter les délais et à atteindre les objectifs de modernisation.

Les partenaires et les clients peuvent également créer des outils de migration sur Lakebridge. Par exemple, DoorDash a construit son usine de migration avec Lakebridge. 

L'interopérabilité des données est essentielle dans une architecture de lakehouse moderne. Elle permet un accès transparent aux données entre différents moteurs et équipes sans compromettre les performances, la cohérence ou la vélocité des développeurs. Les traducteurs SQL tels que Transaxle (basé sur Lakebridge) sont essentiels pour rendre cette interopérabilité réalité. Ils comblent les écarts de dialecte, réduisent les erreurs humaines et permettent une utilisation plus rapide et plus collaborative des actifs de données partagés. —Harsha Venkat Annapa Reddy, Data Foundations Engineering Manager, DoorDash

Lakebridge vous permet également de moderniser sur des standards ouverts en migrant vos données et votre logique vers des formats, des catalogues et des technologies ouverts. La solution convertit la syntaxe propriétaire comme BTEQ (Teradata), T-SQL (Microsoft) et PL/SQL (Oracle) en code SQL ouvert et conforme ANSI qui s'exécute de manière transparente sur Databricks SQL. Cette approche vous libère de la dépendance vis-à-vis d'un fournisseur et positionne votre entreprise pour tirer pleinement parti de l'écosystème de données ouvert, interopérable et prêt pour l'avenir de Databricks.

Renforcez la confiance de l'entreprise

La migration des entrepôts de données et des charges de travail ETL vers Databricks est une décision commerciale transformationnelle, mais l'entreprise doit avoir confiance dans la qualité des données, la compatibilité et le risque du projet. Lakebridge répond à ces préoccupations en offrant une visibilité claire à chaque étape de votre migration d'entrepôt de données. Avec des tableaux de bord en temps réel, une validation automatisée et une traçabilité de bout en bout, Lakebridge garantit que les chefs d'entreprise peuvent avancer avec clarté et assurance tout au long des différentes phases de la migration, transformant la migration d'une source d'incertitude en un avantage stratégique.

Prochaines étapes

Databricks s'engage à améliorer le processus de migration, en le rendant plus rapide, plus intelligent et plus prévisible. Dans les mois à venir, une migration de nouvelle génération alimentée par l'IA avancée sera introduite.

Bientôt disponible, Lakebridge intégrera :

• Conversion de code alimentée par Mosaic AI, exploitant l'apprentissage par renforcement pour améliorer la précision de la traduction.
• Un module dédié à la migration des données pour automatiser et optimiser les flux de travail de déplacement des données.
• Une interface utilisateur graphique (GUI) pour une navigation intuitive, un suivi de la migration et des informations de validation.

Ces améliorations font partie de notre vision plus large visant à fournir une solution de migration alimentée par GenAI, conçue pour les besoins de l'entreprise, qui applique des grands modèles de langage avec des garde-fous en place. Contrairement aux outils d'IA à usage général, Lakebridge AI est spécialement conçu pour garantir que toutes les sorties générées sont validées, traçables et basées sur la logique source.

Les clients peuvent opter pour les fonctionnalités alimentées par GenAI à leur propre rythme, garantissant ainsi une plus grande confiance, rapidité et contrôle tout au long du parcours de migration.

Pour commencer

Lakebridge Foundations est maintenant gratuit pour les clients et partenaires Databricks. Que vous planifiiez votre première migration ou que vous mettiez à l'échelle des centaines de charges de travail, Lakebridge fournit l'automatisation, l'intelligence et la fiabilité dont vous avez besoin pour moderniser en toute confiance.

(Cet article de blog a été traduit à l'aide d'outils basés sur l'intelligence artificielle) Article original