Data Engineer GCP Big Query Dataflow F/H

CATAMANIA; Paris; Sur place; EUR 47 000 - 57 000; Plein temps

Résumé du poste

CATAMANIA recherche un Data Engineer Cloud pour intégrer des services financiers dans deux applications mobiles. Vous contribuerez à l’intégration des données, à l’architecture cible et à la qualité des données sur GCP, via Terraform et pipelines ETL Python/Airflow, avec visualization Data Studio/Power BI.

Compétences requises: Cloud GCP, BigQuery, DBT, Terraform, SQL et Python; anglais écrit/oral. CDI. Salaire affiché: 47–57 k€ brut annuels, expérience 7 ans indispensable.

Qualifications

• Compétences techniques: Cloud GCP, Looker, SQL, Python.
• Data Engineer orienté Cloud.
• Bonne capacité relationnelle et rédactionnelle.
• Rigueur et force de proposition.
• Bon niveau d'anglais écrit et oral.

Responsabilités

• Intégrer les données de contrats via API et SI.
• Assurer l'expérience utilisateur des écrans et du selfcare.
• Personnaliser le moteur de recommandation et exploiter les données.
• Accompagner dans l'architecture cible et la qualité des données.
• Conception et déploiement sur GCP.
• Automatiser le provisionnement GCP avec Terraform (IaC).
• Développer des pipelines ETL avec Python et Airflow.
• Intégrer et modéliser les données dans BigQuery avec dbt.
• Stocker et gérer les données brutes sur Cloud Storage.
• Préparer les données via DataPrep et assurer la data quality.
• Mettre à disposition les jeux de données pour les métiers.
• Visualiser les indicateurs via Data Studio et Power BI.

Connaissances

Cloud GCP

Looker

SQL

Python

Data Engineer Cloud

Anglais

Outils

Terraform

BigQuery

dbt

Cloud Composer

DataPrep

Airflow

Pub/Sub

Looker

Description du poste

Descriptif du poste

Vous interviendrez dans le cadre d'un programme visant à intégrer les services financiers dans deux applications mobiles.

Vos missions consisteront à contribuer :

• Intégrer les données de contrats: exposition via des API, Connexion au SI,
• Assurer une expérience utilisateur des écrans, selfcare client,
• Personnaliser le moteur de recommandation, exploitation des données,
• Accompagner dans l'architecture cible, la qualité de la donnée,
• Conception et déploiement de l'architecture fonctionnelle et applicative sur GCP
• Automatisation du provisionnement des ressources GCP avec Terraform (IaC)
• Développement de pipelines ETL avec Python / Airflow pour le traitement séquentiel des données
• Intégration et modélisation des données dans BigQuery avec dbt (Data Build Tool) pour industrialiser les transformations SQL
• Stockage et gestion des données brutes sur Cloud Storage
• Connexion et préparation des données via DataPrep et suivi de la qualité des données (monitoring)
• Mise à disposition des jeux de données nettoyés aux équipes métiers
• Visualisation des indicateurs clés via Data Studio / Power BI

Profil recherché

Pour mener à bien ce projet, vous devrez justifier de :

• Compétences techniques: Cloud GCP, ( Cloud Storage, Cloud Functions, DataPrep, Cloud Composer, Big Query, DataFlow, Pub/Sub, DBT, Terraform.), Looker, SQL, Python
• Compétences en Data Engineer orienté Cloud
• Bonne capacité relationnelle et rédactionnelle
• Rigueur, force de proposition,
• Bon niveau d'anglais écrit oral

Type de contrat CDI

Contrat travail Salaire

• 47 - 57 k€ brut annuel

Expérience

• 7 An(s) Cette expérience est indispensable

Informations complémentaires

• Secteur d'activité : Conseil en systèmes et logiciels informatiques

Employeur

Créée en 1999, CATAMANIA fait partie des ESN les plus compétitives dans les régions où elle est implantée et se spécialise sur des projets d envergure orientés métiers : Grande Distribution, Banque, Assurance et Protection sociale mais aussi Energie, Industrie, Secteur Public.

En 2022 CATAMANIA c est : 84 millions d de chiffre d affaires, 1100 collaborateurs répartis sur 15 agences en France et 4 agences à l international : Rabat, Luxembourg, Genève et Montréal.

Aujourd'hui, l objectif est d