Consultant(e) Data Engineer - Databricks (H/F/NB)

Trimane; Puteaux; Hybride; EUR 70 000 - 100 000; Plein temps

Résumé du poste

Trimane recherche un(e) consultant(e) Data Engineer - Expert Databricks pour piloter les migrations de l'un de ses clients et assurer des pipelines de données performants.

Diplômé(e) d'une grande école ou équivalent, vous possédez 5 ans d'expérience en Data Engineering, architecture et ingénierie des données, avec une forte appétence pour le conseil et les environnements cloud.

Qualifications

• 5 ans d'expérience en Data Engineering et architecture de données.
• Expérience en cabinet de conseil est un atout.
• Expertise en Data Lake, Data Warehouse, Lakehouse et data mesh.
• Maîtrise ETL/ELT, pipelines batch et streaming.
• Connaissance des enjeux métiers et accompagnement client.

Responsabilités

• Développer et optimiser les pipelines de données, qualité et performance.
• Traduire les besoins métiers en solutions de données performantes.
• Collaborer avec les architectes data pour modèles et tables efficaces.
• Concevoir et surveiller des indicateurs de qualité des données.
• Rédiger tests unitaires, d'intégration et de validation.
• Communiquer l'avancement des projets aux parties prenantes.
• Résoudre proactivement anomalies et incidents.
• Concevoir et optimiser flux ELT robustes.
• Aligner les solutions avec les objectifs métiers et la stratégie produit.

Connaissances

Data engineering

Data architecture

Data modeling

Agile / Scrum

Leadership

Client relation

English proficiency

Formation

Diplôme d'ingénieur ou équivalent en informatique / data engineering

Outils

Python

SQL

Spark

Airflow

Kafka

Azure Data Factory

AWS Glue

GCP Dataflow

Databricks

Snowflake

Docker

Kubernetes

Git / CI-CD

Data Lake / Data Warehouse / Lakehouse

Description du poste

À propos de nous

Fondée en 2005, TRIMANE est un cabinet de conseil et une société de services spécialisée en Data Intelligence (Data & IA). Notre mission : créer de la valeur à partir des données disponibles dans les entreprises, en s'appuyant sur des approches algorithmiques innovantes, des méthodologies éprouvées et de nombreuses technologies de pointe.

En tant que spécialiste Data, nous sommes reconnus pour le très haut niveau d'expertise de nos consultants et de notre retour d'expérience en la matière.

Nous accompagnons nos clients du secteur public ou privé sur des prestations de Conseil : MOA et MOE, autour du traitement et l'analyse des data, quel que soit l'environnement technique : BI, Big Data, Cloud, Machine Learning, Deep Learning, NLP, ou encore sur les aspects méthodologiques : Gestion de projet, Agile, DataOps, stratégie Data Gouvernance et l'organisation Data Driven.

Pourquoi nous rejoindre

• Un accompagnement personnalisé (référents technique, RH et commercial)
• Un accès à des formations et certifications en continu
• Une forte culture innovation & R&D
• Un environnement convivial et collaboratif
• Des opportunités d'évolution dans un écosystème dynamique (Data, IA, Blockchain)

Le poste

Trimane recherche un(e) consultant(e) Data Engineer - Expert Databricks, pour piloter les projets de migration de l'un de ses clients.

Votre rôle

• Développer, maintenir et optimiser les pipelines de données en mettant l'accent sur la qualité, la performance et la scalabilité.
• Collaborer étroitement avec les Business Analysts afin de traduire les besoins métiers et les analyses produits en solutions de données performantes.
• Travailler avec les architectes data pour concevoir des modèles et des tables de données efficaces, facilitant l'accès rapide aux insights pour les utilisateurs finaux.
• Concevoir, mettre en œuvre et surveiller des indicateurs de qualité des données afin de garantir leur intégrité, leur cohérence et leur fiabilité.
• Créer, maintenir et exécuter une documentation de test complète, incluant les tests unitaires, d'intégration et de validation.
• Communiquer l'avancement des projets de manière claire et adaptée à différents types d'interlocuteurs, techniques et non techniques.
• Adopter une approche proactive de résolution de problèmes afin d'identifier, analyser et corriger les anomalies ou incidents.
• Concevoir, développer et optimiser des flux ELT performants et robustes.
• Comprendre la stratégie produit et les usages de la donnée afin de garantir l'alignement des solutions mises en œuvre avec les objectifs métiers.

Profil recherché

Diplômé(e) d'une grande école d'ingénieur ou d'une formation universitaire en informatique, en data engineering ou dans un domaine technique similaire, vous souhaitez relever des défis ambitieux ? Ce poste est fait pour vous !

Votre Profil

• Vous justifiez d'une expérience de 5 ans minimum (en CDI) sur des sujets de Data Engineering, architecture de données ou développement data.
• Une expérience significative en cabinet de conseil est un réel atout.
• Vous possédez une expertise reconnue en architecture data (Data Lake, Data Warehouse, Lakehouse, data mesh), en ingénierie des données (ETL/ELT, pipelines batch et streaming) et une solide connaissance des enjeux métiers.
• Vous maîtrisez les technologies et outils suivants : Python, SQL, Spark, Airflow, Kafka, plateformes Cloud (Azure Data Factory, AWS Glue, GCP Dataflow, Databricks, Snowflake), conteneurisation (Docker, Kubernetes) et outils de versionning (Git, CI/CD).
• Une certification (à jour) sur l'un des éléments suivant est apprécié : Spark/SQL/Snowflake/Databricks.
• Expérience en intégration de données depuis des systèmes d'entreprise complexes (ERP, CRM, finance, RH).
• Maîtrise des techniques d'ingestion et de transformation dans un environnement cloud (idéalement Snowflake).
• Compétences solides en data modeling analytique & orchestration de pipelines de données.
• Capacité à travailler en méthodologie Agile (Scrum).
• Anglais maitrisé.
• Excellent relationnel client, posture de conseil, sens de la synthèse.
• Leadership naturel, appétence pour la transmission de savoir et le travail en équipe.

Trimane place la diversité et l'égalité des chances au cœur de ses préoccupations et s'engage dans ses recrutements.