Consultant Databricks

WHIZE; Neuilly-sur-Seine; Sur place; EUR 50 000 - 70 000; Plein temps

Avantages offerts par ce poste

Postes intéressants et évolutifs

Évènements internes techniques et business

Résumé du poste

Une entreprise spécialisée dans la Data Intelligence recrute un Consultant Databricks à Neuilly-sur-Seine. Vous serez responsable de l'automatisation des process data, de l'optimisation des traitements, et de la gestion de la plateforme Databricks. La maîtrise de Python, Spark et des architectures Big Data est essentielle. Rejoignez une société à taille humaine avec une ambiance conviviale et dynamique.

Qualifications

• Expérience en Data Engineering ou projets Big Data.
• Très bonne connaissance des architectures Big Data et maîtrise de Databricks.
• Capacité à travailler en équipe et à communiquer avec des interlocuteurs techniques et métiers.

Responsabilités

• Automatiser les process data via Databricks Workflows ou des orchestrateurs externes.
• Maintenir, optimiser et superviser les traitements existants.
• Tester, évaluer et proposer de nouveaux outils ou services.

Connaissances

Data Engineering

Python

Spark

SQL avancé

Databricks

Infrastructure as Code

Gouvernance des données

Outils

Databricks

Terraform

Ansible

Description du poste

Consultant Databricks

Offre pour un CDI : Consultant DataBricks / Python

Whize est une filiale du groupe Neurones (7000 collaborateurs en France), spécialisée dans le domaine de la Data Intelligence et du développement de solutions sur mesure en architecture Serverless (Azure, AWS). Notre positionnement se décline en 3 offres :

• Modern BI: expertise dans toute la chaine décisionnelle pour la création de tableaux de bord interactifs, l'extraction et transformation (ETL) des données de différentes sources en utilisant des outils de Business Intelligence (BI) modernes, tels que Power BI et Tableau et AZURE Data Factory.
• Data Engineering: Solides compétences en gestion des données pour collecter, stocker et traiter de grandes quantités de données de manière fiable et évolutive en utilisation Python pour la gestion efficace des flux de données.
• Développement en Cloud Native: expertise dans la conception des applications en utilisant des langages de développement modernes (.Net, Java, Node.js, Python) et des services cloud natifs, tels que AWS, Azure, ou Google Cloud ainsi que l'intégration des bonnes pratiques DevOps.
• Mettre à disposition automatiquement des données dans la plateforme Databricks en exploitant les fonctionnalités de Delta Lake et des pipelines distribués
• Automatiser les process data via Databricks Workflows ou des orchestrateurs externes (Airflow, AWS Step Functions, etc.)
• Maintenir, optimiser et superviser les traitements existants (jobs PySpark, Spark SQL) pour garantir performance et fiabilité
• Faire évoluer le modèle de données afin de répondre aux besoins métiers et aux bonnes pratiques d’architecture Data Lakehouse
• Monitorer l’ensemble des services de la plateforme : disponibilité, intégration, qualité des données, consommation des ressources et coûts
• Participer aux travaux de migration et d’évolution de la plateforme vers les dernières versions et fonctionnalités Databricks
• Tester, évaluer et proposer de nouveaux outils ou services (Databricks ML, Unity Catalog, outils de gouvernance) pour améliorer la performance et la sécurité de la plateforme

Profil recherché :

• Expérience en Data Engineering ou projets Big Data
• Très bonne connaissance des architectures Big Data et maîtrise de Databricks (Data Engineering, Delta Lake, optimisation de jobs)
• Maîtrise de Python, Spark et SQL avancé
• Idéalement, connaissance des outils d’Infrastructure as Code (Terraform ou Ansible)
• Sensibilité aux problématiques de performance, sécurité et gouvernance des données
• Capacité à travailler en équipe et à communiquer avec des interlocuteurs techniques et métiers

Qu’attendez-vous pour nous rejoindre ?

• Vous ferez partie d’une société à taille humaine et qui bénéficie des avantages d'un grand groupe. Nous adressons une centaine de clients en direct dont la moitié sont des grands comptes.
• Vous serez accompagné(e) et managé(e) par le CEO de WHIZE (THE WHIZE MAN).
• Vous allez compléter notre équipe dynamique et travailler avec nous dans une ambiance Start-up et conviviale.
• Vous occuperez des postes intéressants et évolutifs.
• Vous bénéficierez des évènements internes organisés pour parler tech, business et projets.
• Vous réaliserez des projets à forte valeur ajoutée.

📍 : Neuilly-Sur-Seine+ Télétravail

Vélizy-Villacoublay, Île-de-France, France 2 weeks ago