Senior Data Engineer - Pipelines, Databricks & PySpark

SmartRecruiters, Inc.; France; Hybride; EUR 70 000 - 110 000; Plein temps

Avantages offerts par ce poste

Tickets restaurant

Transports

Chèques vacances

Rabais logement 1%

ALTEN Solidaire

Événements d’entreprise

Résumé du poste

ALTEN recherche un Data Engineer sénior pour renforcer son pôle Data & Analytics. Vous concevrez et déploierez des pipelines de données robustes avec Databricks, PySpark et DBT, et veillerez à l’optimisation des traitements ETL/ELT et à la modélisation des données.

Vous collaborerez avec Data Scientists et métiers, automatiserez les déploiements via CI/CD et contribuerez à l’évolution de l’architecture data du groupe, avec des solutions cloud et une forte attention RGPD et sécurité.

Qualifications

• Maîtrise de PySpark et Databricks pour pipelines ETL/ELT.
• Connaissance solide des bases SQL et NoSQL.
• Expérience avec modèles de données et data warehousing cloud.
• Capacité à travailler en équipe et à communiquer technique.

Responsabilités

• Concevoir et déployer des pipelines de données robustes et scalables avec Databricks, PySpark et DBT pour alimenter les environnements d’analyse et de ML.
• Optimiser les performances des traitements ETL/ELT via les meilleures pratiques de data modeling et Spark.
• Collaborer avec Data Scientists et métiers pour livrer des jeux de données fiables et documentés.
• Automatiser le déploiement et la maintenance des pipelines via CI/CD et assurer le monitoring (Airflow, Prometheus).
• Contribuer à l’évolution de l’architecture data du groupe et intégrer des solutions cloud (AWS, Azure ou GCP) tout en respectant RGPD et sécurité.

Connaissances

PySpark

Databricks

DBT

SQL

NoSQL

Snowflake

BigQuery

Redshift

Git

DevOps

Formation

Master (Bac+5) ou diplôme d'une école d'ingénieurs

Outils

Delta Lake

Spark SQL

Airflow

Prometheus

Description du poste

ALTEN recherche un Data Engineer sénior pour renforcer son pôle Data & Analytics. Vous concevrez et déploierez des pipelines de données robustes avec Databricks, PySpark et DBT, et veillerez à l’optimisation des traitements ETL/ELT et à la modélisation des données.

Vous collaborerez avec Data Scientists et métiers, automatiserez les déploiements via CI/CD et contribuerez à l’évolution de l’architecture data du groupe, avec des solutions cloud et une forte attention RGPD et sécurité.