Le lac de données est incontestablement le modèle de référence pour tirer le meilleur parti des bénéfices du cloud, de la donnée et de l’apprentissage automatique, ainsi que pour les rendre accessibles aux équipes digitales et aux clients. Comment pouvons-nous accélérer son implémentation et améliorer sa portée sans perdre le contrôle ou compromettre sa durabilité?
Beaucoup d'initiatives autour du lac de données déboucheront sur un échec. Ceci en raison d’approches bien souvent artisanales, telles que du codage spécifique, et le report au second plan des questions de qualité, de sécurité, de gouvernance ou de conformité.
Les données d'un lac de données ne sont utiles que si elles aident à prendre les bonnes décisions au bon moment, et ce succès repose sur une approche agile et structurée, basée sur des plateformes ouvertes, intégrées, collaboratives et sécurisées.
L'instauration d'une gouvernance, de contrôles et de processus est le principal défi dans la gestion de l'information.
40% des heures travaillées sont perdus dans :
La gestion d'un volume croissant de données
La gestion autour de l'accès et du partage d'informations
La collection, consolidation et validation des données
La transformation digitale des organisations fait émerger de nouvelles contraintes, telles que la capacité de traitement :
Des milliards de lignes et des volumes de données de plusieurs dizaines de téraoctets
Des structures de données variables (CSV, JSON, XML, etc.)
Des transactions à grande vélocité, avec des temps de réponses rapides
Des analyses complexes en temps réel
La transformation digitale peut être appréhendée au travers de 5 thèmes principaux :
- Réconcilier les informations utilisées à l’interne et à l’externe
Assurer la fiabilité de l'information
Assurer la compréhension des activités commerciales
- Produire des informations plus rapidement
Améliorer les processus
Améliorer les outils de production de l'information
- Réduire les coûts de production de l'information
Automatiser les tâches à faible valeur ajoutée
Diminuer la durée du cycle de production
- Améliorer la qualité de l'information
Gagner du temps pour analyser et transformer la donnée
Faciliter la publication de l'information
- Améliorer l'accès aux informations de base
Maîtriser la visibilité des informations
Donner accès à l'information aux utilisateurs extérieurs à l'entreprise
La solution pour vous aider à résoudre ces défis, est l’approche Smart Data Cloud (3 joueurs – 1 solution).
Avec ses partenaires, Keyrus a créé une approche basée sur les meilleures pratiques en matière d’intégration de la donnée, avec deux solutions leaders du marché : la Plateforme d’Intégration de Données (Talend) et la Plateforme de Stockage des Données (Snowflake).
Talend est un leader en matière d’intégration de données cloud et d’intégrité des données. Avec une combinaison de produits construits sur la même plateforme, un environnement de conception et un ensemble d’outils de gestion, Talend offre, au sein d'un même outil, une flexibilité de résolution de différents types de problèmes d’intégration, et ce à un prix très concurrentiel.
La mission de Snowflake consiste à apporter à chaque organisation l’appui des données grâce à une élasticité instantanée, une solution de partage des données sécurisée et à une facturation à la seconde, et ce sur plusieurs Clouds. Snowflake associe la puissance de l’entrepôt de données à la flexibilité des plateformes de big data, et à l’élasticité du Cloud.
Keyrus est un acteur international de la transformation et de la performance des entreprises, qui ambitionne de se positionner comme le partenaire stratégique de ses clients en les accompagnant dans l'analyse et la valorisation de leurs données, ainsi que dans le développement et la maîtrise de leur expérience digitale. Au cours des vingt dernières années, le Groupe a développé son expertise et ses compétences afin d'aider les entreprises à optimiser leurs performances, et à relever leurs défis de transformation.
L'approche "Smart Cloud Data"
L’approche Smart Data Cloud est basée sur trois composantes, permettant à nos clients d’implanter leur stratégie de manière rapide, progressive et sécurisée.
1 - Une architecture SaaS
La première étape de cette approche Smart Cloud Data est la sélection de l’architecture SaaS (Software as a Service) de Talend et Snowflake. L'architecture doit permettre aux clients de développer, implémenter et faire évoluer leur architecture en limitant les investissements. Le modèle de tarification est quant à lui basé sur l’utilisation payante.
Ceci représente un plus en termes de gestion puisque le coût de l’architecture est prévisible.
Un autre avantage de la solution est son évolutivité. Les deux solutions sont conçues pour être évolutives sans avoir à investir dans la croissance soutenue des activités.
2 - L'agilité
Keyrus utilise une méthode agile pour implémenter et construire l’entrepôt de données de ses clients.
En adoptant une approche basée sur des ateliers utilisateurs afin de comprendre et hiérarchiser les besoins de l’entreprise, Keyrus garantit une livraison itérative et rapide avec des résultats visibles.
Plutôt que d’attendre plusieurs mois avant d’obtenir les résultats du projet, nous mettons en place plusieurs jalons de projet, permettant de contrôler les dates d’exécution et les rendements du projet. Les résultats sont publiés, ce qui permet aux utilisateurs d’extraire et présenter les informations importantes à l’organisation.
3 - Un dispositif clé en main
Les dispositifs de Keyrus donnent à nos clients la garantie d'un point de contact unique, qui comprend leurs objectifs et leurs défis. Le centre de contact de Keyrus gère et soutient le produit, le développement et la maintenance de la solution globale.
Architecture globale
L’architecture permettra la collecte des données, l’évolutivité de la plateforme et la flexibilité de la solution. En tant qu’intégrateur majeur de Talend et Snowflake, Keyrus offre des connecteurs et des API avec plusieurs sources de données internes et externes. Les consultants Keyrus construisent des flux de travaux industriels (DevOps) et implémentent des processus d’intégration et de développement continus (CI/CD).
Les étapes des intervenants
Chaque compagnie propose trois phases permettant aux clients de bénéficier de l’ensemble des solutions à valeurs ajoutées de Keyrus.
La possibilité de se connecter à des bases de données classiques / des sources Cloud ou API, en utilisant Talend Data Integration Tool ou Snowflake Integration Query Language
La capacité de simplifier et automatiser les processus d’alimentation (qu'il s'agisse de processus en temps réel, CDC ou ETL/ELT)
La capacité d’intégrer votre historique de données
La capacité d'implémenter des processus de Qualité des Données en utilisant des solutions d’Intégration des Données fournies par Talend, ou en implémentant des processus d’affaires ETL
La capacité de mettre en œuvre des processus de réconciliation des données de sources internes et externes, pour obtenir données fiables
La possibilité d’exposer et de partager des données dans l’ensemble de votre organisation en créant des vues DataMart et des API dans l’architecture Snowflake
La possibilité d’exposer les données à vos fournisseurs, clients et prospects à l’aide d’API
La possibilité de revendre vos données pour créer une offre de «
Data as a Service » à l’aide d’API
La capacité de traiter les données à l’aide d’une solution Avancée d’Analyse des Données, telle que Machine Learning, l’analyse de données ou d’autres outils
Conclusion
L’offre est basée sur nos accélérateurs techniques (starter kit / DevOps), permettant de livrer un entrepôt de données final et évolutif.
Keyrus livrera des données prêtes à être divulguées (Open Data, API, etc.), avec l’introduction de la connaissance humaine et des processus informatiques.
La combinaison des solutions techniques de pointe de Talend et Snowflake et de l'expérience de Keyrus assurera à votre entreprise une livraison complète et fiable.