Data Engineer - GCP, Python & Spark for Risk Analytics

Free-Work; Paris; Sur place; EUR 65 000 - 90 000; Plein temps

Résumé du poste

Free-Work recherche un Data Engineer pour concevoir et déployer des solutions Data sur Google Cloud Platform, en utilisant Python et Spark pour transformer et ingérer des volumes importants de données. Vous travaillerez sur l’ingestion, l’agrégation et l’exposition de données issues de sources multiples, avec un focus sur l’intégration et l’industrialisation des traitements.

Le poste implique de maintenir le RUN des applications et d’assurer la qualité et la sécurité des données, tout en

Qualifications

• Expérience en ingénierie de données dans un contexte GCP.
• Conception et développement de pipelines data.
• Implication sur la qualité et la sécurité des données.
• Maintenance RUN et documentation technique.
• Industrialisation des modèles ML et leur maintien en RUN.

Responsabilités

• Concevoir et développer des solutions Data sur Google Cloud Platform.
• Développer et intégrer des traitements Python et Spark.
• Mettre en place et faire évoluer les pipelines d’ingestion et de traitement.
• Ingestion, agrégation et exposition des données issues de sources multiples.
• Assurer la supervision et l’exemple des données, leur qualité et leur sécurité.

Connaissances

Data engineering

Google Cloud Platform

Python

Spark

ETL pipelines

Data quality

Data security

Outils

BigQuery

Airflow

Apache Spark

Description du poste

Free-Work recherche un Data Engineer pour concevoir et déployer des solutions Data sur Google Cloud Platform, en utilisant Python et Spark pour transformer et ingérer des volumes importants de données. Vous travaillerez sur l’ingestion, l’agrégation et l’exposition de données issues de sources multiples, avec un focus sur l’intégration et l’industrialisation des traitements.

Le poste implique de maintenir le RUN des applications et d’assurer la qualité et la sécurité des données, tout en