Critères de l'offre
Métiers :
- Data Engineer (H/F)
Secteur :
- ESN, Editeurs de logiciel, Services informatiques
Compétences :
- Xml
Lieux :
- Lyon (69)
Conditions :
- Indépendant / Franchisé
- 400 € - 480 €
- Temps Plein
Description du poste
Nous recherchons pour l'un de nos clients un Data Engineer pour intervenir sur un projet stratégique de référentiel de données financières.
Le projet vise à centraliser, fiabiliser et gouverner l'ensemble des données liées aux instruments financiers, au sein d'un socle de Master Data Management (MDM).
Vous intégrerez une squad Data pluridisciplinaire composée de développeurs Data, d'un Architecte technique, d'un Business Analyst et d'un Product Owner.
Mission :
Conception & développement Data :
Conception et développement de pipelines de données robustes et évolutifs
Implémentation du modèle Bronze / Silver / Gold
Intégration et transformation de données multi-sources
Orchestration & ingestion :
Développement et paramétrage de workflows Apache NiFi
Collecte et normalisation de données issues de :
fichiers CSV / XML
API REST
Industrialisation et sécurisation des flux
Modélisation & qualité des données :
Participation à la modélisation du socle de données
Construction de vues consolidées MDM
Mise en place de contrôles de qualité :
complétude
unicité
cohérence
traçabilité et versioning
Performance, sécurité & bonnes pratiques :
Suivi et optimisation des performances des pipelines
Mise en œuvre des standards de sécurité des données (authentification, chiffrement, gestion des accès)
Documentation technique et partage de connaissances au sein de la squad
Le projet vise à centraliser, fiabiliser et gouverner l'ensemble des données liées aux instruments financiers, au sein d'un socle de Master Data Management (MDM).
Vous intégrerez une squad Data pluridisciplinaire composée de développeurs Data, d'un Architecte technique, d'un Business Analyst et d'un Product Owner.
Mission :
Conception & développement Data :
Conception et développement de pipelines de données robustes et évolutifs
Implémentation du modèle Bronze / Silver / Gold
Intégration et transformation de données multi-sources
Orchestration & ingestion :
Développement et paramétrage de workflows Apache NiFi
Collecte et normalisation de données issues de :
fichiers CSV / XML
API REST
Industrialisation et sécurisation des flux
Modélisation & qualité des données :
Participation à la modélisation du socle de données
Construction de vues consolidées MDM
Mise en place de contrôles de qualité :
complétude
unicité
cohérence
traçabilité et versioning
Performance, sécurité & bonnes pratiques :
Suivi et optimisation des performances des pipelines
Mise en œuvre des standards de sécurité des données (authentification, chiffrement, gestion des accès)
Documentation technique et partage de connaissances au sein de la squad
Référence : 599545

