Nous poursuivons notre développement et recherchons actuellement un.e Data Engineer orienté QA / Data Quality pour intervenir chez l’un de nos clients dans le domaine bancaire. 💻☁️
🎯 Contexte de la mission
Dans le cadre du renforcement de sa Data Platform Cloud, notre client souhaite accélérer la mise en place de standards de qualité, de fiabilité et d’observabilité autour de ses traitements Data.
Vous intégrerez une feature team dédiée à la conception, au développement et à la fiabilisation des pipelines de données au sein d’un environnement moderne basé sur Databricks et AWS.
L’objectif : garantir des données fiables, cohérentes et exploitables pour les usages métiers, analytics et IA, tout en intégrant les bonnes pratiques QA directement dans les pipelines Data.
Vous évoluerez dans un environnement Agile, international et fortement orienté qualité et amélioration continue.
Définir et mettre en œuvre des règles de qualité de données :
• complétude
• cohérence
• unicité
• exactitude
Mettre en place des frameworks de validation et de contrôle qualité des données
Concevoir et intégrer des tests automatisés dans les pipelines ETL / ELT :
• tests unitaires
• tests d’intégration
• tests de non-régression
Garantir la conformité des transformations de données avec les règles métiers et les besoins fonctionnels
Concevoir et faire évoluer des pipelines Data intégrant des mécanismes de contrôle qualité
Participer au traitement et à la validation des données à grande échelle avec Spark et Databricks
Analyser et corriger les anomalies de qualité de données en production
Contribuer à la fiabilisation et à l’industrialisation des traitements Data
Mettre en place des solutions d’observabilité et de monitoring :
• alerting
• détection d’anomalies
• détection de dérive des données
Participer à la supervision des pipelines et à la gestion des incidents
Contribuer à l’intégration des bonnes pratiques QA dans les pipelines CI/CD
Travailler en étroite collaboration avec :
• les Data Engineers
• les Data Analysts
• les équipes métiers
• les Product Teams
Participer à la définition des data contracts et des critères d’acceptance
Accompagner les équipes dans l’adoption des bonnes pratiques Data Quality
De formation supérieure en informatique ou Data, vous justifiez d’au moins 4 ans d’expérience en Data Engineering, Data Quality ou QA Data dans des environnements Cloud et Big Data.
Vous êtes reconnu.e pour votre rigueur, votre sens de l’analyse et votre capacité à fiabiliser des traitements de données complexes.
Vous appréciez les environnements techniques modernes, collaboratifs et orientés amélioration continue.
• Python avancé
• SQL avancé
• ETL / ELT
• Data Quality Frameworks
• Tests automatisés Data
• Spark
• Databricks
• AWS
• CI/CD
• Monitoring & observabilité
• Automatisation des tests
• Agile / Scrum / SAFE
• Quality by Design
• Data Observability
➕ Une expérience autour des sujets Data Contracts, Data Observability ou Data Governance serait un plus.
Esprit analytique et sens du détail
Capacité à investiguer et résoudre des problématiques complexes
Autonomie et sens des responsabilités
Force de proposition
Bon relationnel et esprit collaboratif
Curiosité technique et veille autour des sujets Data Quality
Bonne communication en anglais