Consultant Big Data / PySpark

WHIZE; Neuilly-sur-Seine; Sur place; EUR 55 000 - 90 000; Plein temps

Résumé du poste

WHIZE, filiale du groupe Neurones, recherche un expert Big Data pour intervenir sur des plateformes scalables. Vous travaillerez sur PySpark, Python et SQL pour transformer et orchestrer des flux de données.

Vous explorerez des architectures Hadoop/Spark, participerez à l’optimisation des traitements et à la gouvernance des données, dans une équipe à taille humaine avec un esprit start-up.

Qualifications

• Expérience sur des projets Big Data
• Maîtrise de PySpark pour le développement de traitements distribués
• Solides compétences en Python et SQL

Responsabilités

• Maintenir et optimiser les traitements existants pour garantir performance et fiabilité des données
• Concevoir et faire évoluer les solutions Data (Big Data, PySpark) pour répondre aux besoins métiers
• Participer à la gouvernance et à la qualité des données et à la monitoring des services
• Travailler en équipe et communiquer efficacement avec les interlocuteurs techniques et métiers

Connaissances

PySpark

Python

SQL

Big Data

Hadoop/Spark

Teamwork

Communication

Description du poste

Whize est une filiale du groupe Neurones (7000 collaborateurs en France), spécialisée dans le domaine de la Data Intelligence et du développement de solutions sur mesure en architecture Serverless (Azure, AWS). Notre positionnement se décline en 3 offres :

• Modern BI : expertise dans toute la chaine décisionnelle pour la création de tableaux de bord interactifs, l'extraction et transformation (ETL) des données de différentes sources en utilisant des outils de Business Intelligence (BI) modernes, tels que Power BI et Tableau et AZURE Data Factory.
• Data Engineering : Solides compétences en gestion des données pour collecter, stocker et traiter de grandes quantités de données de manière fiable et évolutive en utilisation Python pour la gestion efficace des flux de données.
• Développement en Cloud Native: : expertise dans la conception des applications en utilisant des langages de développement modernes (.Net, Java, Node.js, Python) et des services cloud natifs, tels que AWS, Azure, ou Google Cloud ainsi que l'intégration des bonnes pratiques DevOps.
• Mettre à disposition automatiquement des données dans la plateforme Big Data en exploitant PySpark pour le traitement distribué
• Automatiser les process data (batch et/ou streaming) afin d’optimiser les flux d’ingestion, de transformation et de restitution
• Maintenir et optimiser les traitements existants pour garantir performance, fiabilité et scalabilité
• Faire évoluer le modèle de données afin de répondre aux besoins métiers et aux bonnes pratiques d’architecture Big Data
• Monitorer l’ensemble des services de la plateforme : disponibilité, intégration, qualité des données, consommation des ressources
• Participer aux travaux de migration ou d’évolution de la plateforme vers de nouvelles versions ou technologies associées
• Tester et proposer de nouveaux outils ou frameworks permettant d’améliorer la performance, la sécurité et la gouvernance des données

Profil recherché:

• Expérience sur des projets Big Data
• Maîtrise de PySpark pour le développement de traitements distribués
• Solides compétences en Python et SQL
• Connaissance des concepts et architectures Big Data (Hadoop, Spark)
• Capacité à optimiser les performances des traitements et à assurer la qualité des données
• Bon esprit d’équipe et aisance dans la communication avec des interlocuteurs techniques et métiers

Qu’attendez-vous pour nous rejoindre ?

• Vous ferez partie d’une société à taille humaine et qui bénéficie des avantages d'un grand groupe. Nous adressons une centaine de clients en direct dont la moitié sont des grands comptes.
• Vous serez accompagné(e) et managé(e) par le CEO de WHIZE (THE WHIZE MAN).
• Vous allez compléter notre équipe dynamique et travailler avec nous dans une ambiance Start-up et conviviale.
• Vous occuperez des postes intéressants et évolutifs.
• Vous bénéficierez des évènements internes organisés pour parler tech, business et projets.
• Vous réaliserez des projets à forte valeur ajoutée.