Consultant(e) Data Engineer - Databricks (H/F/NB)

TRIMANE | Expert BI et Big Data; Puteaux; Sur place; EUR 70 000 - 105 000; Plein temps

Avantages offerts par ce poste

Formations et certifications

Veilles technologiques

Activités d'équipe (CSE)

Résumé du poste

TRIMANE, cabinet conseil spécialisé en Data Intelligence, recherche un(e) consultant(e) Data Engineer - Expert Databricks.

Vous piloterez les migrations et développerez des pipelines ELT, travaillerez avec Business Analysts et Architects pour garantir la qualité, la performance et la scalabilité des solutions data déployées chez nos clients publics et privés.

Qualifications

• Expérience minimale de 5 ans en Data Engineering (CDI).
• Expérience en cabinet de conseil est un atout.
• Maîtrise architecture data: lakehouse, data mesh, data lake/warehouse.
• Maîtrise des pipelines ETL/ELT et orchestrations.
• Anglais opérationnel.

Responsabilités

• Développer, maintenir et optimiser les pipelines de données.
• Traduire les besoins métiers en solutions data performantes.
• Concevoir modèles et tables de données efficaces.
• Garantir la qualité et fiabilité des données.
• Rédiger et maintenir la documentation de test et tests.
• Communiquer l'avancement des projets.

Connaissances

Python

SQL

Spark

Airflow

Kafka

Cloud platforms

Databricks

Snowflake

Docker

Kubernetes

Git

CI/CD

Formation

Grande école d'ingénieur

Formation universitaire informatique / data engineering

Outils

Azure Data Factory

AWS Glue

GCP Dataflow

Description du poste

Fondée en 2005, TRIMANE est un cabinet de conseil et une société de services spécialisée en Data Intelligence (Data & IA). Notre mission : créer de la valeur à partir des données disponibles dans les entreprises, en s'appuyant sur des approches algorithmiques innovantes, des méthodologies éprouvées et de nombreuses technologies de pointe.

En tant que spécialiste Data, nous sommes reconnus pour le très haut niveau d'expertise de nos consultants et de notre retour d'expérience en la matière.

Nous accompagnons nos clients du secteur public ou privé sur des prestations de Conseil : MOA et MOE, autour du traitement et l'analyse des data, quel que soit l'environnement technique : BI, Big Data, Cloud, Machine Learning, Deep Learning, NLP, ou encore sur les aspects méthodologiques : Gestion de projet, Agile, DataOps, stratégie Data Gouvernance et l'organisation Data Driven.

Rejoindre Trimane, C'est Construire Ensemble Une Relation Durable, De Confiance Et Évoluer Dans Un Environnement Stimulant à Taille Humaine Où Votre Carrière Est Au Cœur De Nos Priorités, C'est Pourquoi Nous Offrons à Nos Collaborateurs

• Un accompagnement personnalisé (référents technique, RH et commercial)
• Un accès à des formations et certifications en continu
• Une forte culture innovation & R&D
• Un environnement convivial et collaboratif
• Des opportunités d'évolution dans un écosystème dynamique (Data, IA, Blockchain)

POSTE / MISSIONS

Trimane recherche un(e) consultant(e) Data Engineer - Expert Databricks, pour piloter les projets de migration de l'un de ses clients.

Votre Rôle

• Développer, maintenir et optimiser les pipelines de données en mettant l'accent sur la qualité, la performance et la scalabilité.
• Collaborer étroitement avec les Business Analysts afin de traduire les besoins métiers et les analyses produits en solutions de données performantes.
• Travailler avec les architectes data pour concevoir des modèles et des tables de données efficaces, facilitant l'accès rapide aux insights pour les utilisateurs finaux.
• Concevoir, mettre en œuvre et surveiller des indicateurs de qualité des données afin de garantir leur intégrité, leur cohérence et leur fiabilité.
• Créer, maintenir et exécuter une documentation de test complète, incluant les tests unitaires, d'intégration et de validation.
• Communiquer l'avancement des projets de manière claire et adaptée à différents types d'interlocuteurs, techniques et non techniques.
• Adopter une approche proactive de résolution de problèmes afin d'identifier, analyser et corriger les anomalies ou incidents.
• Concevoir, développer et optimiser des flux ELT performants et robustes.
• Comprendre la stratégie produit et les usages de la donnée afin de garantir l'alignement des solutions mises en œuvre avec les objectifs métiers.

PROFIL RECHERCHÉ

Diplômé(e) d'une grande école d'ingénieur ou d'une formation universitaire en informatique, en data engineering ou dans un domaine technique similaire, vous souhaitez relever des défis ambitieux ? Ce poste est fait pour vous !

Votre Profil

• Vous justifiez d'une expérience de 5 ans minimum (en CDI) sur des sujets de Data Engineering, architecture de données ou développement data.
• Une expérience significative en cabinet de conseil est un réel atout.
• Vous possédez une expertise reconnue en architecture data (Data Lake, Data Warehouse, Lakehouse, data mesh), en ingénierie des données (ETL/ELT, pipelines batch et streaming) et une solide connaissance des enjeux métiers.
• Vous maîtrisez les technologies et outils suivants : Python, SQL, Spark, Airflow, Kafka, plateformes Cloud (Azure Data Factory, AWS Glue, GCP Dataflow, Databricks, Snowflake), conteneurisation (Docker, Kubernetes) et outils de versionning (Git, CI/CD).
• Une certification (à jour) sur l'un des éléments suivant est apprécié : Spark/SQL/Snowflake/Databricks.
• Expérience en intégration de données depuis des systèmes d'entreprise complexes (ERP, CRM, finance, RH).
• Maîtrise des techniques d'ingestion et de transformation dans un environnement cloud (idéalement Snowflake).
• Compétences solides en data modeling analytique & orchestration de pipelines de données.
• Capacité à travailler en méthodologie Agile (Scrum).
• Anglais maitrisé.
• Excellent relationnel client, posture de conseil, sens de la synthèse.
• Leadership naturel, appétence pour la transmission de savoir et le travail en équipe.

Trimane place la diversité et l'égalité des chances au cœur de ses préoccupations et s'engage dans ses recrutements.

AVANTAGES

• Un accès en illimité à nos plateformes de formations, des certifications, des formations en interne autour en BI, Big Data, Machine Learning, Blockchain, développement web et logiciels software;
• Des ateliers de veilles technologiques sur des sujets innovants;
• Un CSE avec des afterworks, des escapes games, et autres activités d'équipe !

Liste non exhaustive…