Data Engineer Senior

Description du poste

Le consultant interviendra au sein d'une équipe data transverse et sera en charge de la mise en œuvre de solutions robustes pour la collecte, la transformation, l’automatisation et l’exploitation des données à destination des métiers.

• Concevoir, développer et déployer des pipelines de données performants (ETL/ELT),

• Collaborer avec les équipes métiers pour recueillir les besoins et proposer des solutions adaptées,

• Rédiger les spécifications techniques à partir des besoins fonctionnels,

• Mettre en place la collecte et la mise à disposition des données en lien avec les référentiels internes,

• Garantir la sécurité et la conformité des pipelines de données mis en production,

• Analyser et transformer les données pour répondre aux usages métiers (analytics, reporting, etc.),

• Industrialiser et automatiser les traitements de données selon les spécifications définies,

• Développer et maintenir les batchs de traitement automatisé,

• Assurer le suivi de la production, la maintenance et la résolution des incidents,

• Contribuer à l’industrialisation des modèles statistiques,

• Développer des dashboards en lien avec les attentes métiers,

• Rédiger et maintenir la documentation technique liée aux bases de données et à leur exploitation,

• Accompagner les citizen developers dans leur appropriation de la plateforme data interne.

• ***PRE-REQUIS :

- Data engineering

- Python, Pandas, SQL

- Dagster, Spark, DeltaLake, Apache Parquet

- Conceptualisation de base de données

Séniorité : +8ans

Dans le cadre d’un projet stratégique visant à moderniser son architecture data, un acteur majeur de la gestion d’actifs souhaite renforcer son équipe avec un profil freelance expérimenté en ingénierie des données. L’objectif est de répondre efficacement aux demandes des lignes métiers tout en respectant les principes d’implémentation de l’architecture DataMesh et les bonnes pratiques associées.