Data Engineer (H/F)

Capfi; Paris; Sur place; EUR 50 000 - 80 000; Plein temps

Avantages offerts par ce poste

Formations certifiantes

Environnement de travail flexible

Initiatives communautaires

Résumé du poste

Une entreprise de conseil spécialisée recherche un consultant de haut niveau en Data Engineering pour concevoir et développer des pipelines de données dans un environnement cloud. Le candidat idéal doit maîtriser les technologies AWS, notamment S3 et Kinesis, et avoir une solide expérience dans les bases de données telles qu’Exadata et SQL Server. De plus, il doit justifier d’au moins 6 ans d’expérience en tant que Data Engineer et posséder de bonnes compétences en communication. L'entreprise offre un environnement de travail flexible et des opportunités de formation.

Qualifications

• Justifier d’au moins 6 ans d’expérience en tant que Data Engineer.
• Connaissances avancées des outils AWS.
• Connaissance pratique d’Airflow et Terraform.

Responsabilités

• Développement de pipelines ETL/ELT avec Airflow, Python, SQL.
• Intégration des données dans AWS.
• Automatiser les pipelines de données.

Connaissances

Dynamique

Proactif

Autonome

Bonne communication

Curiosité scientifique

Maîtrise de l'écosystème AWS

Maîtrise des bases de données et Data warehouses

Maîtrise de SQL

Maîtrise de Python

Expérience en Terraform

Connaissance de GitLab CI/CD

Connaissances des problématiques de data quality

Formation

Certification AWS

Certification Snowflake

Certification Terraform

Outils

Airflow

Terraform

GitLab CI/CD

Description du poste

Nous sommes à la recherche d’un consultant de haut niveau spécialisé en Data Engineering, disposant d’une expertise approfondie dans les technologies AWS (Kinesis, DMS, S3, etc.), Airflow, Terraform, GitLab CI/CD, Python ainsi qu’une solide maîtrise des bases de données telles qu’Exadata, Oracle, SQL Server et Snowflake. Il sera chargé de concevoir et développer des pipelines de réplication et de traitement de données dans un environnement cloud tout en contribuant activement à la fiabilité, l’automatisation et la scalabilité de notre plateforme data.

Rejoignez-nous, épanouissez-vous

Responsabilités

• Développement de pipelines ETL/ELT avec Airflow, Python, SQL
• Connexion aux bases sources (Exadata, Oracle, etc.)
• Intégration des données dans AWS (S3, Kinesis, DMS, Lambda…)
• Nettoyage, mapping, déduplication et enrichissement des données
• Collaboration avec les architectes pour appliquer les modèles cibles
• Documentation technique et référentiels
• Concevoir et mettre en œuvre les flux de réplication
• Harmoniser et transformer les données
• Automatiser les pipelines de données
• Développer des pipelines GitLab CI/CD
• Développer de l’IaC pour des architectures sophistiquées full AWS avec Terraform, Ansible et Python
• Contribuer au FinOps

Vous êtes le bon candidat si :

• Aptitudes : Être dynamique, proactif, autonome, ouvert d’esprit, bon communicant avec une grande curiosité scientifique
• Très bonne maîtrise de l’écosystème AWS (S3, Kinesis, DMS, Lambda…)
• Très bonne maîtrise des bases de données et des Data warehouses (Exadata, Oracle, SQL Server, Snowflake, etc.)
• Maitrise des langages : SQL, Python
• Maîtrise des outils de traitement et d’orchestration (Apache Airflow, dbt, Python, SQL)
• Bonne expérience en Terraform pour l’IaC
• Connaissance de GitLab CI/CD pour l’automatisation des déploiements
• Expérience avec des CRM
• Connaissance des problématiques de data quality, modélisation, monitoring et alerting
• Expérience : Justifier d’au moins 6 ans d’expérience en tant que Data Engineer ou Ingénieur Intégration Data dans un environnement similaire
• Une ou plusieurs certifications (AWS, Snowflake, Terraform, etc.) sont fortement appréciées
• Langues : Maîtrise de l’anglais courant

Ce que nous avons à vous offrir

CAPFI est une entreprise vivante qui place le collectif et le partage entre pairs au cœur de sa culture. Nous vous proposons un environnement de travail flexible dans l’organisation et agile dans le choix de vos missions. CAPFI c’est aussi :

• Vous offrir la possibilité de suivre des formations certifiantes
• Vous permettre de rejoindre les Tribus et de faire vivre l’énergie collective et l’expertise de CAPFI
• Vous permettre de consacrer un peu de votre temps pour aider les autres, via NQT, Emmaüs Connect et Le Congé Solidaire, des initiatives dont CAPFI est partenaire

Chez CAPFI, nous mettons aussi un point d’honneur à ce que tous nos talents évoluent dans un environnement de travail sain, serein et respectueux des exigences sociétales et environnementales. C’est pourquoi :

• Nous sommes labellisés B Corp
• Nous sommes signataires de la charte sur l’équilibre vie professionnelle – vie personnelle et de la charte éthique CAPFI

Notre processus de recrutement :

1. Nous apprenons à nous connaître lors d’un premier entretien téléphonique puis une visio
2. Si vous avez le feeling et que nous aussi, vous réalisez un test technique via la plateforme CodinGame
3. Débrief des résultats de votre test avec un consultant CAPFI
4. Kick off : nous vous proposons une offre de collaboration et nous en discutons ensemble
5. Vous embarquez pour une session d’onboarding : bienvenue dans la famille CAPFI !