Data Engineer - Plateforme Data Engineering H/F

France Travail; Vitrolles; Sur place; EUR 41 000 - 83 000; Temps partiel

Résumé du poste

France Travail recherche un Data Engineer pour concevoir et développer une plateforme data moderne et robuste à Vitrolles. Vous participerez à l'industrialisation et la gouvernance des flux de données en mode Intérim.

Vous interviendrez sur les pipelines, l'ingestion depuis bases/fichiers/APIs, et la modélisation Bronze/Silver/Gold tout en garantissant qualité et sécurité des données.

Qualifications

• Conception et développement de pipelines de données robustes et scalables.
• Intégration de sources variées ( bases, fichiers, APIs, événements ).
• Respect des bonnes pratiques de qualité, gouvernance et sécurité des données.

Responsabilités

• Concevoir et développer des pipelines de données robustes et scalables.
• Mettre en place les flux d'ingestion depuis différentes sources (bases, fichiers, APIs, événements).
• Structurer et transformer les données selon l'architecture Bronze/Silver/Gold.
• Garantir la qualité, la cohérence et la fraîcheur des données.
• Collaborer avec métiers, architectes et data analysts et participer aux choix d'architecture.

Connaissances

Data pipelines

PostgreSQL

Apache Flink

Kafka

Airflow

dbt

Debezium

3DX

Outils

PostgreSQL

Apache Flink

Kafka

Airflow

dbt

Debezium

3DX

Windchill

SAP

Description du poste

Contexte du projet Les grands environnements industriels font face à des enjeux majeurs liés à la donnée :Multiplication des sources d'information (applications métiers, systèmes PLM, bases de données, fichiers, APIs.)Hétérogénéité des formats et des modèlesBesoin croissant de données fiables, qualifiées et à jourNécessité d'échanges quasi-temps réel entre les systèmes Dans ce contexte, nos équipes participent à la mise en place de plateformes de Data Engineering modernes, visant à industrialiser et gouverner les flux de données. Dans ce cadre, nous recherchons un(e) Data Engineer pour participer activement à la conception et au développement de ces nouveaux usages data. Vos missions Intégré(e) à une squad transverse ou métier, vous contribuerez à la mise en œuvre et à l'évolution d'une plateforme data :Concevoir et développer des pipelines de données robustes et scalablesMettre en place les flux d'ingestion depuis différentes sources : bases de données, fichiers, APIs, événements, etc.Structurer et transformer les données selon une architecture médaillon :Bronze : collecte et stockage des données brutesSilver : qualification, nettoyage, modélisationGold : consolidation et exposition des data productsGarantir la qualité, la cohérence et la fraîcheur des donnéesIndustrialiser les traitements batch et streamingCollaborer étroitement avec les équipes métiers, architectes et data analystsParticiper aux choix d'architecture et aux bonnes pratiques (performance, sécurité, gouvernance) Environnement technique Vous évoluerez dans un ecosystème moderne orienté data :Base de données : PostgreSQLStreaming / Event processing : Apache Flink, KafkaOrchestration : AirflowTransformation / Modélisation : dbtIntégration / CDC : Debezium (selon cas d'usage)Écosystème applicatif & PLM : 3DX / Windchill / SAP / outils bureau d'études

Type de contrat Intérim - 1 Mois
Contrat travail

Expérience

• Débutant accepté

Informations complémentaires

• Secteur d'activité : Activités des agences de placement de main-d'œuvre