CONTEXTE / PRESENTATION DE MISE EN PLACE DE LA PLATEFORME DATA
La donnée est identifiée comme un levier de performance dans le plan stratégique de notre client. Afin de pouvoir accéder au potentiel de création de valeur de la donnée, une nouvelle plateforme Data doit être mis en place. Elle couvre les enjeux suivants.
1/ Développer de nouveaux services Data pour les métiers qui permet de :
Démocratiser l’accès et l’usage de la donnée à l’échelle du Groupe dans le respect de la réglementation et l’état de l’art
Favoriser le self-service et l’autonomie des utilisateurs finaux dans l’usage de la data
Soutenir les usages de Datascience (Lab, Semi-industriel, Industriel) et les projets IA à grande échelle de demain
D’actionner les décisions prises grâce à la data et l’IA dans l’écosystème interne et externe
2/ Disposer d’un patrimoine Data du groupe afin de :
Servir les usages et le croisement de données à l’échelle du Groupe avec une gouvernance CDO
Contribuer à la consolidation des données et la construction d’objets métiers au service du Groupe
Construire une Data Market Place au sein du Groupe (données externes, données valorisées) pour favoriser le partage et la synergie
Mettre à disposition un dictionnaire de données sur l’ensemble du patrimoine de données de la plateforme (brutes, données de référence, données valorisées…) (industriel à la portée des métiers et des opérationnels)
3/ Se doter d’un socle technique transverse et non siloté :
Une plateforme mutualisée à l’état de l’art pour servir les usages futurs, avec des outils groupe adaptés aux besoins et aux processus, avec un hébergement en conformité avec la stratégie du Groupe
Un socle en adhérence avec nos pipelines de données / Plateforme APIs pour la collecte et la diffusion de notre patrimoine valorisé avec une stratégie d’abonnement et de publication
LES ENJEUX
Face à ces enjeux, la DSI a lancé un programme de transformation de l’ensemble de la filière Data. Ce programme comprend notamment la mise en place de plusieurs nouveaux socles techniques:
La mise en place d’une nouvelle plateforme Data, basé sur les technologies Cloud, comprenant l’ingestion, la mise en œuvre d’un patrimoine de données, une plateforme DataViz, une plateforme Datascience/IA
La mise en place de briques d’échanges standards, favorisant la connectivité avec les applications internes/externes :
=> Données chaudes : streaming Kafka on premise et Kafka Confluent en cloud AWS (Data Pipeline), orchestration de services
(Pub/Sub, event driven, Message drive, API Management Mulesoft
=> Données froides : ETL Talend Hybride, on premise & cloud
DESCRIPTION DE LA PRESTATION » Mise en œuvre des nouvelles briques d’échanges »
La prestation aura pour but de réaliser les études de conception, la mise en place des plateformes d’intégration qui permettent notamment d’alimenter la plateforme Data Groupe et d’exposer les données en sortie de la plateforme Data. Enfin, cette mission couvre également les études et conception des cas d’usages qui vont s’appuyer sur cette plateforme. Un consultant à temps plein est requis pour la réalisation de cette mission. Il sera intégré à l’équipe Data de la DSI sur la discipline Data Integration et complètera un dispositif déjà en place :
Equipe Socle Data Groupe qui gère la plateforme Data
Equipe CCOE Cloud qui gère l’offre AWS/Azure ainsi que toute la practice DevOps & CI/CD
Equipes Data Factory, qui traite de l’ensemble des cas d’usages métier.
LIVRABLES (documents de conception) :
Inventaire des plateformes Legacy sur le volet ETL (Talend & Datastage On premise) : outil, versions, identification des gestionnaires, coûts de run, dette technique.
Due diligence sur Mulesoft sur le premier projet utilisant la plateforme
Etude d’architecture de l’intégration des briques d’échanges pour la nouvelle plateforme Data Groupe (Stack basée sur AWS, Spark/Databricks, Snowflake). Périmètre identifié à date :
==> Mulesoft+ Kafka sur la brique API M, MFT, ETL « léger » et Talend sur ETL et traitements lourds
==> Architecture fonctionnelle, patterns de conception, Chiffrage des travaux de réalisation, licences, volet FINOPS
LIVRABLES (document de suivi) :
Documents de suivi (alimentation du Kanban, Jira & confluence en weekly):
Pilotage et Mise en place des plateformes
Accompagnement des Squad Lead Tech de la plateforme Data Groupe
Accompagnement des squads projets sur les patterns, la conception des solutions
CRITERES REQUIS
Le profil requis est celui d’un consultant Data Architect Sénior BAC+ 5 ou équivalent en diplôme avec minimum 10 ans d’expérience.
Compétences et expériences minimum requises :
• Certifications Mulesoft Integration Architect Obligatoire
• Expérience minimum d’au moins 5 ans sur les projets d’intégration basé sur Mulesoft aux technologies équivalentes.
• Expérience en développement d’API
• Connaissances sur les solutions de monitoring Datadog / ELK
• Connaissance dans le domaine du Shell Unix (automatisation).
D’autre part, la prestation nécessite autonomie, adaptation, méthode, rigueur et une bonne aptitude relationnelle. Elle suppose aussi d’être force de proposition, d’approche globale des problèmes, et enfin la rédaction de documents étant requise, des facultés rédactionnelles et de communication sont également nécessaires.
Le lieu principal de la prestation est situé à Paris Gare de Lyon.
3 jours sur place + 2 jours de TTV.