DÉVELOPPEMENT BIG DATA CLOUD (h/f)

emagine Polska; Courbevoie; Sur place; EUR 60 000 - 100 000; Plein temps

Résumé du poste

emagine Polska recherche un Data Engineer de niveau 3 pour collaborer avec les équipes afin de développer des applications et des API basées sur les technologies Big Data.

Responsabilités : développer des applications et des API REST avec Spring, mettre en place le TDD, déployer des containers et optimiser la JVM sous forte charge.

Profil must-have : AWS, Hadoop, Spark, Java/Scala, Shell Unix, Perl, Python, Git; Azure. Expérience en CI/CD et travail en équipe agile appréciée.

Qualifications

• Expérience avec Hadoop (Big Data).
• Maîtrise de Java et de Scala.
• Expertise en Amazon Web Services (AWS).
• Compétences en développement (Shell Unix, Perl, PHP, Python, Git).
• Connaissance de Spark et des environnements Cloud (AWS/Azure).
• Utilisation de Hadoop/HDFS et déploiement de pipelines Big Data.

Responsabilités

• Développer des applications et des API REST avec le framework Spring.
• Mettre en place une stratégie de test (TDD).
• Assurer le déploiement automatisé des applications (containers).
• Optimiser la JVM pour garantir la stabilité sous forte charge.
• Utiliser les technologies Big Data (HDFS, Spark, Oozie) et Cloud (AWS, Azure).

Connaissances

Java

Scala

AWS

Python

Shell Unix

Perl

PHP

Git

Spark

Hadoop

Azure

Outils

Unix Shell

Hadoop

Spark

AWS

Azure

Description du poste

Résumé

Le rôle principal consiste à collaborer avec les équipes pour développer des applications et des API basées sur les technologies Big Data, apportant ainsi des solutions numériques et analytiques adaptées aux besoins métiers.

Responsabilités :

• Développer des applications et des API REST avec le framework Spring.
• Mettre en place une stratégie de test (TDD).
• Assurer le déploiement automatisé des applications (containers).
• Optimiser la JVM pour garantir la stabilité sous forte charge.
• Utiliser les technologies Big Data (HDFS, Spark, Oozie) et Cloud (AWS, Azure).

Must Haves :

• Expertise en Amazon Web Services (AWS).
• Compétences en développement (Shell Unix, Perl, PHP, Python, Git).
• Expérience avec Hadoop (Big Data).
• Maîtrise de Java et de Scala.
• Expérience avec MS Azure.
• Compétences en Spark.

Nice to Haves :

• Connaissances supplémentaires en DevOps et CI/CD.
• Expérience de travail avec des méthodologies agiles.
• Capacité à travailler en équipe multidisciplinaire.

Autres Détails :

• Type de prestation : Data Engineering de Level 3.
• Engagement envers une méthodologie agile pour le développement et les tests.
• SLA respectés pour la production maintenue opérationnelle.