Data Engineer - Senior Consultant

JAKALA; Paris; Hybride; EUR 65 000 - 95 000; Plein temps

Avantages offerts par ce poste

Bureau central Paris et Caen

Télétravail 2 jours/semaine

Mutuelle d’entreprise

Participation transport 50%

Ticket restaurant 10€ (50% pris en hir

CDI

Handicap friendly

Résumé du poste

JAKALA recherche un Expert Data Engineer pour concevoir et industrialiser des plateformes data destinées à nos clients. Vous travaillerez avec les Data Scientists, Data Engineers et MLE/MLOps afin de définir l’architecture et d’assurer le cycle de vie des données.

Vous cartographierez les flux, développerez des pipelines, et assurerez la scalabilité et la sécurité des données. Maîtrise des outils cloud et des bases SQL/NoSQL est indispensable.

Qualifications

• Diplôme supérieur en SI/Computer Science/Big Data, avec au moins 3 ans d’expérience Data engineering.
• Mise en place de pipelines complets de valorisation de données, de la collecte à la mise à disposition des apps.
• Maîtrise de l’anglais est appréciée et certifications cloud valorisées.

Responsabilités

• Cartographier les données et les flux de données.
• Implémenter des algorithmes d’analyse pour l’industrialisation.
• Concevoir et développer des pipelines batch et temps réel.
• Assurer scalabilité, sécurité et disponibilité des données de la plateforme.
• Rédiger une documentation technique (API, UML).

Connaissances

Python

Java

Spark

DBT

Snowflake

BigQuery

PostgreSQL

Delta Lake

Kafka

RabbitMQ

Databricks

Kubernetes

Terraform

AWS

GCP

Azure

Data mapping

Formation

Diplôme supérieur en SI/Computer Science/Big Data

Outils

Databricks

Snowflake

BigQuery

PostgreSQL

Delta Lake

Kafka

RabbitMQ

Kubernetes

Terraform

AWS

GCP

Azure

Description du poste

Au sein de notre practice Data & AI, tu travailles conjointement avec les Data Scientists, Data Engineers, MLE/MLOps engineer déjà en poste et tu es impliqué.e dans la prise de décisions liée aux solutions Data et à son évolution.

A cet effet, tu es en charge de :

• Contribuer au développement de notre offre Data et à l’industrialisation de plateformes data pour nos clients

• Comprendre, analyser et proposer des solutions techniques répondant aux besoins des Plateformes digitales et des projets internes

• Définir l’architecture logiciel ETL / ELT en collaboration avec vos pairs

• Travailler la donnée sous toutes ses formes (stockage, élaboration de modèles, structuration, nettoyage)

• Rédiger de la documentation technique (diagrammes UML, documentation d’API, …)

• Partager votre savoir-faire entre les différents membres de l’équipe

• Concevoir et développer des connecteurs entre les sources de données (internes et/ou externes) et la plateforme

• Concevoir et développer des pipelines de traitements de données (batch et/ou temps réel) dans un environnement Big Data

• Assurer une veille technologique et savoir mener à bien un projet de R&D

Tu assures en autonomie les missions suivantes en interne ou auprès de nos clients grands comptes :

• Cartographier des données et des flux de données

• Implémenter des algorithmes d’analyse de données pour l’industrialisation

• Collecter, consolider et modéliser de gros volumes de données (Big Data, Data Warehouses, Data Lakes)

• Développer et automatiser des flux de données et leurs visualisations en dashboards, reporting

• S’assurer de la scalabilité, sécurité, stabilité et disponibilité des données de la plateforme

• Analyser les données web pour répondre aux questions métiers et participer à la construction de l’architecture Big Data

• Mettre en place du séquencement et de la supervision des flux précitées en gérant les cas limites

Compétences attendues :

Bon niveau en développement:

• De script ETL : Python (Pandas, API Rest, FaaS), Java (ex Kafka Connect, SOAP), Spark (PySpark, Databricks, Delta Lake)

• De script ETL : DBT (ex. Snowflake, PostgreSQL)

• Connaissance conception et administration d’entrepôt de données: Snowflake, Big Query, PostgreSQL

• LakeHouse : Delta LakeConnaissance message broker, RabbitMQ, Kafka

• Compétences cloud :Kubernetes,Conteneurisation, Fournisseur cloud (AWS, GCP ou Azure), Infrastructure As Code (Terraform)

• Expérience d’architecture et de dimensionnement d’une architecture cloud via des services managés

• Cartographie des données

Diplômé·e d’études supérieures dans le système d’information, computer sciences, big data (école d’ingénieurs, école spécialisée ou équivalent universitaire), tu justifies d’au moins 3 ans en Data engineering.Tu as une expérience significative sur la mise en place de pipelines complets de valorisation de données massives, de la collecte à la mise à disposition d’applications en passant par le traitement.La maîtrise de l’anglais est appréciée.Certification·s appréciée·s : GCP Professionnal Data Engineer OU Azure Data Engineer Associate OU AWS Solution Architect.Tu es passionné·e par ton métier et aimes le faire partager.

Les avantages

• Entreprise en plein développement , véritable tremplin et accélérateur de progression

• Projets et missions sur des champs techniques très variés

• Mise en situation de responsabilité rapidement

• Bureau en plein centre de Paris et de Caen

• Télétravail possible jusqu’à 2 jours par semaine

• Mutuelle d’entreprise

• 50% de frais de participation pour les transports

• Ticket restaurant d’une valeur de 10€ (50% prise en charge par l’employeur)

• Contrat

• Poste à pourvoir en CDI

• Rémunération selon profil et expérience

• Poste ouvert aux personnes en situation de handicap