Description du poste
Rejoins-nous en plein cœur de Paris en tant que Data Engineer et intègre une de nos 30 squads qui réunit 8 à 10 personnes (data scientist, data engineer, software engineers…). Chacune des squads est dédiée à un projet métier et intervient dans la production des Minimum Viable Products (MVPs).
Tu évolueras dans uncontexte agile (scrum/scrumban), en mode itératif et co-constructif, en t'appuyantsur l'intelligence collective.En tant que DataEngineer, tu garantis la qualité des pipelines data du produit, tu assures le développementdes programmes pour collecter, préparer, transformer et diffuser les données.
Ce que nous t'offrons:
- Le développement de tes compétences avec le support de la Digital Academy et une enveloppe équivalente à 10 jours de formations par an que tu peux choisir en toute autonomie (formations externes et internes).
- La possibilité de te certifier sur les plateformes AWS et Azure, Databricks,….
- Un programme de mentorat pour t'accompagner.
- Un équilibre vie professionnelle et vie personnelle avec le recours possible aux horaires flexibles et au télétravail à domicile.
- Un environnement de travail international et interculturel en plein cœur de Paris, engagé dans la diversité et l'inclusion.
En tant Data Engineer, nous attendons techniquement de toi que tu :
- Conçoives, construises et intègres des données au sein de la Squad et en collaboration avec les autres Squads.
- Assures le stockage, la consommation, l'intégration et la gestion des données des cas d'utilisation.
- Fasses l'analyse de l'analyse de l'accessibilité des données et que tu recommandes des solutions pour leur intégration.
- Coordonnes la mise en place, l'industrialisation et la maintenance de l'architecture data : infrastructure, cloud, flux de données. Tu intègres également les données dans le data lake.
- Collabores avec les data scientists pour la réalisation des modèles de prédiction.
- Produises un code de qualité, mettes en place des tests automatisés et systématiques pour le contrôler.
- Interagisses avec les architectes et les autres Data Engineers pour s'assurer de l'efficacité des solutions et apporter des préconisations techniques.
En parallèle, tu auras également des missions transverse. Pour ce faire, nous attendons de toi que tu :
- Assures la veille technologique sur les architectures data et les nouvelles technologies.
- Coaches et accompagnes la communauté des Data Engineers de la Digital Factory en participant au Communities of Practice (CoP) par exemple.
Tu as une expérience d'au moins 4 ans en data engineering, tu es diplômé d'un master ou d'une école d'ingénieur spécialisée en informatique ou mathématiques.Les compétences qui sont attendues de toi en tant que Data Engineer :
- La maitrise de Python, Spark et SQL.
- Une bonne connaissance sur les bases de données relationnelles et non relationnelles.
- La capacité à concevoir et à mettre en œuvre des solutions de chargement, de manipulation, de traitement, d'analyse et d'exploration de données à grande échelle.
- Une bonne compréhension du machine learning.
Une première expérience sur un provider de Cloud, AWS de préférence.
DATA ENGINEER SENIOR - TOTALENERGIES DIGITAL FACTORY