Critères de l'offre
Métiers :
- Data Engineer (H/F)
Secteur :
- ESN, Editeurs de logiciel, Services informatiques
Compétences :
- DEVOPS
- REST api
- Scripting
- Bash
- Json
- + 9 compétences
Lieux :
- Lyon (69)
Conditions :
- Indépendant / Franchisé
- 420 € - 450 €
- Temps Plein
Description du poste
Contexte du posteDans le cadre d'un projet de refonte de son SI, notre Groupe renforce son dispositif Data au sein de la Direction des Systèmes d'Information.
L'objectif est de concevoir, développer et maintenir des flux de données fiables et industrialisés au service des équipes métiers Épargne et Services Financiers.
Le poste est rattaché au DAS Épargne & Services Financiers et s'inscrit dans un environnement orienté data, qualité et automatisation.
Missions
Missions principalesEn tant que Data Engineer, vous interviendrez sur la conception, le développement et l'industrialisation des flux de données, dans un contexte finance / assurance à forts enjeux de qualité, de traçabilité et de performance.
Concevoir et implémenter le socle data du Master Data Management (MDM)
Intégrer et transformer les données issues de différentes sources
Sécuriser et industrialiser les flux dans le respect des standards de qualité et de traçabilité attendus
Mettre en œuvre des traitements de données (collecte, transformation, stockage)
Garantir la qualité, la fiabilité et la performance des flux
Travailler en lien étroit avec les équipes métiers et IT
Contribuer aux bonnes pratiques de développement, d'automatisation et de CI/CD
Stack technique
Compétences requises (niveau confirmé)Data & traitement : Apache NiFi, requêtage et traitement de données (SQL / NoSQL)
Connaissance des formats et protocoles : JSON, XML, CSV, REST API
Base de données & stockage : PostgreSQL, Stockage objet (S3)
DevOps & industrialisation : GitLab, GitLab CI, Pratiques CI/CD
Compétences appréciéesLangages & scripting : Python, Bash
L'objectif est de concevoir, développer et maintenir des flux de données fiables et industrialisés au service des équipes métiers Épargne et Services Financiers.
Le poste est rattaché au DAS Épargne & Services Financiers et s'inscrit dans un environnement orienté data, qualité et automatisation.
Missions
Missions principalesEn tant que Data Engineer, vous interviendrez sur la conception, le développement et l'industrialisation des flux de données, dans un contexte finance / assurance à forts enjeux de qualité, de traçabilité et de performance.
Concevoir et implémenter le socle data du Master Data Management (MDM)
Intégrer et transformer les données issues de différentes sources
Sécuriser et industrialiser les flux dans le respect des standards de qualité et de traçabilité attendus
Mettre en œuvre des traitements de données (collecte, transformation, stockage)
Garantir la qualité, la fiabilité et la performance des flux
Travailler en lien étroit avec les équipes métiers et IT
Contribuer aux bonnes pratiques de développement, d'automatisation et de CI/CD
Stack technique
Compétences requises (niveau confirmé)Data & traitement : Apache NiFi, requêtage et traitement de données (SQL / NoSQL)
Connaissance des formats et protocoles : JSON, XML, CSV, REST API
Base de données & stockage : PostgreSQL, Stockage objet (S3)
DevOps & industrialisation : GitLab, GitLab CI, Pratiques CI/CD
Compétences appréciéesLangages & scripting : Python, Bash
Référence : 600418

