Consultant(e) Data Engineer - Databricks (H/F/NB)

Trimane; Puteaux; Hybrid; EUR 85,000 - 110,000; Full time

Job summary

Trimane recherche un(e) consultant Data Engineer - Expert Databricks pour piloter les migrations et les projets Data chez ses clients. Vous concevrez des pipelines ELT, assurerez leur qualité et leur scalabilité, et travaillerez en étroite collaboration avec les Architectes data.

Vous maîtrisez les technologies Cloud (Databricks, Snowflake, Azure/AWS/GCP), Python et SQL, avec une forte appétence pour l’innovation et le travail en équipe dans un cadre agile.

Qualifications

• Diplômé d'une grande école d'ingénieur ou d'une formation universitaire en informatique/data engineering.
• 5 années d'expérience minimum en Data Engineering et architecture de données.
• Expérience en cabinet de conseil est un atout et compréhension des enjeux métier.

Responsibilities

• Développer, maintenir et optimiser les pipelines de données, en privilégiant qualité, performance et scalabilité.
• Collaborer avec les Business Analysts pour traduire les besoins métiers en solutions de données performantes.
• Concevoir des modèles et des tables de données efficaces, facilitant l’accès rapide aux insights.
• Concevoir, mettre en œuvre et surveiller les indicateurs de qualité des données.
• Créer, maintenir et exécuter une documentation de tests (unitaires, intégration, validation).
• Communiquer l’avancement des projets à des interlocuteurs techniques et non techniques.
• Adopter une approche Agile/Scrum et résoudre les anomalies ou incidents.
• Concevoir, développer et optimiser des flux ELT performants et robustes.
• Aligner les solutions sur la stratégie produit et les usages de la donnée.

Skills

Python

SQL

Spark

Airflow

Kafka

Cloud platforms

Docker

Kubernetes

Git

CI/CD

Data modeling

Data orchestration

Agile

Education

Diplôme d'ingénieur

Formation universitaire en informatique

Tools

Azure Data Factory

AWS Glue

GCP Dataflow

Databricks

Snowflake

Job description

Fondée en 2005, TRIMANE est un cabinet de conseil et une société de services spécialisée en Data Intelligence (Data & IA). Notre mission : créer de la valeur à partir des données disponibles dans les entreprises, en s'appuyant sur des approches algorithmiques innovantes, des méthodologies éprouvées et de nombreuses technologies de pointe.

En tant que spécialiste Data, nous sommes reconnus pour le très haut niveau d'expertise de nos consultants et de notre retour d'expérience en la matière. Nous accompagnons nos clients du secteur public ou privé sur des prestations de Conseil : MOA et MOE, autour du traitement et l'analyse des data, quel que soit l'environnement technique : BI, Big Data, Cloud, Machine Learning, Deep Learning, NLP, ou encore sur les aspects méthodologiques : Gestion de projet, Agile, DataOps, stratégie Data Gouvernance et l'organisation Data Driven.

Rejoindre Trimane, c'est construire ensemble une relation durable, de confiance et évoluer dans un environnement stimulant à taille humaine où votre carrière est au cœur de nos priorités, c'est pourquoi nous offrons à nos collaborateurs :

• Un accompagnement personnalisé (référents technique, RH et commercial)
• Un accès à des formations et certifications en continu
• Une forte culture innovation & R&D
• Un environnement convivial et collaboratif
• Des opportunités d'évolution dans un écosystème dynamique (Data, IA, Blockchain)

Le poste

Trimane recherche un(e) consultant(e) Data Engineer - Expert Databricks, pour piloter les projets de migration de l'un de ses clients.

Votre rôle

• Développer, maintenir et optimiser les pipelines de données en mettant l'accent sur la qualité, la performance et la scalabilité.
• Collaborer étroitement avec les Business Analysts afin de traduire les besoins métiers et les analyses produits en solutions de données performantes.
• Travailler avec les architectes data pour concevoir des modèles et des tables de données efficaces, facilitant l'accès rapide aux insights pour les utilisateurs finaux.
• Concevoir, mettre en œuvre et surveiller des indicateurs de qualité des données afin de garantir leur intégrité, leur cohérence et leur fiabilité.
• Créer, maintenir et exécuter une documentation de test complète, incluant les tests unitaires, d'intégration et de validation.
• Communiquer l'avancement des projets de manière claire et adaptée à différents types d'interlocuteurs, techniques et non techniques.
• Adopter une approche proactive de résolution de problèmes afin d'identifier, analyser et corriger les anomalies ou incidents.
• Concevoir, développer et optimiser des flux ELT performants et robustes.
• Comprendre la stratégie produit et les usages de la donnée afin de garantir l'alignement des solutions mises en œuvre avec les objectifs métiers.

Profil recherché

Diplômé(e) d'une grande école d'ingénieur ou d'une formation universitaire en informatique, en data engineering ou dans un domaine technique similaire, vous souhaitez relever des défis ambitieux ? Ce poste est fait pour vous !

Votre Profil

• Vous justifiez d'une expérience de 5 ans minimum (en CDI) sur des sujets de Data Engineering, architecture de données ou développement data.
• Une expérience significative en cabinet de conseil est un réel atout.
• Vous possédez une expertise reconnue en architecture data (Data Lake, Data Warehouse, Lakehouse, data mesh), en ingénierie des données (ETL/ELT, pipelines batch et streaming) et une solide connaissance des enjeux métiers.
• Vous maîtrisez les technologies et outils suivants : Python, SQL, Spark, Airflow, Kafka, plateformes Cloud (Azure Data Factory, AWS Glue, GCP Dataflow, Databricks, Snowflake), conteneurisation (Docker, Kubernetes) et outils de versionning (Git, CI/CD).
• Une certification (à jour) sur l'un des éléments suivant est apprécié : Spark/SQL/Snowflake/Databricks.
• Expérience en intégration de données depuis des systèmes d'entreprise complexes (ERP, CRM, finance, RH).
• Maîtrise des techniques d'ingestion et de transformation dans un environnement cloud (idéalement Snowflake).
• Compétences solides en data modeling analytique & orchestration de pipelines de données.
• Capacité à travailler en méthodologie Agile (Scrum).
• Anglais maitrisé.
• Excellent relationnel client, posture de conseil, sens de la synthèse.
• Leadership naturel, appétence pour la transmission de savoir et le travail en équipe.

Prêt(e) à relever le défi ?

Trimane place la diversité et l'égalité des chances au cœur de ses préoccupations et s'engage dans ses recrutements.