Freelance Data Engineer FME / Qualité des Données

? Tâches et responsabilités

La mission s'inscrit dans la mise en place d'un référentiel des entreprises appelé à devenir la source de référence pour l'identification des entreprises au sein d'une administration publique. Alimenté progressivement par des sources fédérales et régionales, ce référentiel vise à réduire la dispersion et la duplication des données, à renforcer leur qualité et leur réutilisation, et à soutenir le principe « Only Once ».

Les différentes sources de données seront raccordées progressivement au référentiel dans une logique d'alimentation et de restitution bidirectionnelles.

La mission s'inscrit dans une approche de « quality by design », où la qualité des données est intégrée dès les phases d'ingestion, d'intégration et d'exploitation.

Dans ce cadre, le Data Engineer prend en charge la définition, l'implémentation et l'amélioration continue des processus d'intégration, de contrôle qualité, de détection d'incohérences et de remédiation des données.

• Concevoir les processus d'alimentation, de transformation, de normalisation et de contrôle qualité du référentiel.
• Définir les mécanismes de génération et de gestion d'un identifiant unique, de déduplication, de consolidation entre sources et de gestion des conflits de données.
• Mettre en œuvre les chaînes d'intégration, les connecteurs et les flux d'échange de données, en assurant leur traçabilité complète et le respect des standards d'architecture et de partage en place.
• Définir et automatiser les contrôles de qualité appliqués lors de l'ingestion et sur les données existantes : validation des formats, complétude, cohérence temporelle, validation croisée entre sources et unicité.
• Prévoir des mécanismes permettant l'évolution des règles de validation en fonction des besoins métiers et des évolutions réglementaires.
• Concevoir les mécanismes de détection des anomalies et incohérences, ainsi que les alertes, indicateurs de qualité, tableaux de bord et rapports de suivi.
• Développer les processus de nettoyage et de remédiation des données : standardisation, normalisation, déduplication, enrichissement et correction des erreurs détectées.
• Mettre en place un dispositif permanent de monitoring de la qualité des données et suivre des indicateurs tels que l'exactitude, la complétude, la cohérence, l'unicité, la fraîcheur et la conformité.
• Analyser les tendances et proposer des améliorations techniques ou organisationnelles.
• Contribuer à l'exploitation opérationnelle du référentiel, à la résolution des incidents techniques liés aux données, ainsi qu'à la documentation des processus et des outils.
• Analyser les impacts techniques et fonctionnels des raccordements progressifs et participer à la définition des scénarios de tests ainsi qu'aux campagnes d'intégration.

Vous rejoindrez une équipe composée d'un chef de projet, d'un coordinateur technique et d'un analyste.

? Votre profil

Vous disposez d'une expérience confirmée en tant que Data Engineer ETL / ELT.

Compétences techniques

• Bonne connaissance des principes de gouvernance des données (DAMA, etc.).
• Connaissance théorique et pratique des outils ETL et d'analyse de la qualité des données, notamment FME et les standards Talend en place.
• Maîtrise des processus d'analyse et de conception des systèmes de gestion de bases de données.
• Maîtrise théorique et pratique des processus de Data Quality Management.
• Capacité à concevoir, tester et mettre en œuvre des processus fiables d'intégration et de contrôle qualité.

Soft Skills

• Personne dynamique, flexible et pragmatique.
• Bonne communication, assertivité et écoute active.
• Orientation service et capacité à comprendre les besoins des gestionnaires de données, y compris dans l'urgence.

Langues

• Excellente maîtrise du français, à l'oral comme à l'écrit.

?? Ce poste est proposé en tant que rôle freelance à temps partiel (60%).

Originally posted on Himalayas