Data Engineer - Azure (H/F)Direct Emploi

Lyon (69)CDI
Il y a 6 jours

Description du poste

Dans le cadre du renforcement d'une équipe Data, nous recherchons un(e) Data Engineer Senior pour intervenir sur la conception, l'industrialisation et l'optimisation de traitements de données dans un environnement Azure.
Vous travaillerez principalement sur Databricks, PySpark et Azure Data Factory, avec une dimension complémentaire autour de l'automatisation, du CI/CD et de l'infrastructure cloud.
Vos missions
- Concevoir, développer et enchaîner des notebooks Databricks en PySpark ;
- Alimenter et maintenir les différentes couches Bronze, Silver et Gold ;
- Manipuler et optimiser les formats Parquet, Delta et CSV ;
- Améliorer les performances, la qualité et les coûts des traitements existants ;
- Superviser les flux et pipelines Azure Data Factory, mettre en place des alertes et contribuer à la reprise sur incident ;
- Fiabiliser et industrialiser les traitements Data dans un environnement de production ;
- Faire évoluer les configurations et infrastructures via Terraform ;
- Maintenir et exécuter les pipelines Jenkins liés aux déploiements et traitements Data ;
- Contribuer aux repositories Git : gestion des branches, revues de code, workflows et bonnes pratiques CI/CD ;
- Accompagner les équipes métiers et techniques dans la compréhension des besoins et la priorisation des évolutions ;
- Participer à des études d'opportunité, sujets de conseil et dossiers d'innovation.

Postulez chez Direct Emploi

au poste de Data Engineer - Azure (H/F) - CDI.

Par exemple : prenom.nom@domaine.com. Ce champ est obligatoire.
En cliquant sur "Postuler à cette offre", j'accepte les conditions générales d'utilisation du site Nos Talents Nos Emplois
Référence : 2688360