Data Engineer Python — Databricks & AWS Pipelines

skiils; Suresnes; Hybride; EUR 70 000 - 100 000; Plein temps

Avantages offerts par ce poste

Mutuelle et titre de transport pris en

Télétravail partiel

Télétravail partiel pour équilibre vie

Résumé du poste

Data Factorii recherche un Data Engineer Python / Databricks à Suresnes pour concevoir et faire évoluer des plateformes de données et pipelines robustes. Vous développerez des APIs et services d ingestion en Python/Django, travaillerez avec Spark et Databricks sur des environnements AWS/Azure, et participerez à l’administration Kubernetes et à l’industrialisation via CI/CD.

Le poste demande 4 à 8 années d’expérience, une excellente maîtrise de Python et SQL, et une curiosité permanente pour les

Qualifications

• 4 à 8 ans d'expérience en tant que Data Engineer.
• Maîtrise Python, idéalement avec Django.
• Expérience sur Apache Spark et Databricks.
• Bonne maîtrise de SQL et PostgreSQL.
• Expérience des environnements AWS et/ou Microsoft Azure.
• Bonne connaissance de Kubernetes (EKS), Rancher et architectures conteneurisées.
• Expérience des outils CI/CD (GitLab, Jenkins, Docker, Harbor).
• Connaissance des systèmes distribués et des architectures cloud serait un plus.

Responsabilités

• Développer et faire évoluer des plateformes de données.
• Concevoir des pipelines de traitement robustes pour collecter, transformer et rendre les données disponibles.
• Développer des APIs et des services d’ingestion en Python/Django.
• Développer des traitements Big Data avec Spark et Databricks.
• Contribuer au déploiement sur AWS/Azure et à l’administration de Kubernetes.
• Industrialiser les développements via CI/CD et pratiques DevOps.
• Collaborer avec les équipes Data, Développement et Infrastructure.

Connaissances

Python

Django

Apache Spark

Databricks

SQL

PostgreSQL

AWS

Azure

Kubernetes

CI/CD

GitLab

Jenkins

Docker

Agile / Scrum

Data Platforms

Outils

Docker

GitLab

Jenkins

Harbor

Kubernetes

EKS

Rancher

Description du poste

Data Factorii recherche un Data Engineer Python / Databricks à Suresnes pour concevoir et faire évoluer des plateformes de données et pipelines robustes. Vous développerez des APIs et services d ingestion en Python/Django, travaillerez avec Spark et Databricks sur des environnements AWS/Azure, et participerez à l’administration Kubernetes et à l’industrialisation via CI/CD.

Le poste demande 4 à 8 années d’expérience, une excellente maîtrise de Python et SQL, et une curiosité permanente pour les