Data Engineer - F/H

AIS; Toulouse; In loco; EUR 50.000 - 75.000; Tempo pieno

Descrizione del lavoro

AIS, ESN française, recherche un ingénieur Data/Java pour développer et maintenir des traitements distribués avec Apache Spark. Vous travaillerez sur des pipelines de données volumineuses, optimiserez les performances et participerez à l’industrialisation via CI/CD.

Le candidat idéal justifie d’au moins 3 ans d’expérience sur des environnements big data et maîtrise SQL, DataFrame API et les traitements distribués. Poste basé à Toulouse, avec équipe disponible et projets variés.

Competenze

• Expérience confirmée en développement Java et Apache Spark en production.
• Maîtrise des traitements distribués et des API DataFrame/Dataset.
• Bonnes compétences en SQL et analyse de performance pour les volumes de données.

Mansioni

• Analyser les besoins fonctionnels et contribuer aux choix de conception technique.
• Développer et maintenir des traitements distribués en Java avec Apache Spark.
• Concevoir des pipelines de transformation et d'agrégation de données volumineuses.
• Optimiser les performances des traitements (partitionnement, jointures, mémoire).
• Rédiger les tests et garantir la qualité du code via revues et bonnes pratiques.
• Participer à l’industrialisation et aux déploiements CI/CD.
• Diagnostiquer les anomalies et maintenir les applications en conditions opérationnelles.
• Rédiger la documentation technique et collaborer avec les équipes métiers, Data et infra.

Conoscenze

Java

Apache Spark

SQL

DataFrame API

Distributed processing

Performance tuning

Strumenti

Git

Maven

Gradle

CI/CD

Linux

Descrizione del lavoro

AIS :

Depuis 1985, AIS est une ESN tournée vers l'humain. Nous capitalisons sur le talent de nos collaborateurs pour accompagner nos clients dans leurs projets.

Nos activités :

• Pôle Compétences : activité de régie chez nos clients sur tous nos métiers
• Pôle Infrastructure : projets d'intégration, missions de MCO et de support
• Pôle Applications : projets de développement d'applications web et de TMA

Nos chiffres clefs :

• 250 collaborateurs
• 15 managers techniques
• 5 agences : Nantes, Angers, Rennes, Niort et Toulouse !
• 2 labellisations annuelles: Happy At Work & Tech At Work

CHOISIR AIS, C'EST :

• Travailler dans une entreprise où 83,6% des collaborateurs(trices) sont satisfait(e)s de la qualité des relations humaines.
• Assurer sa montée en compétences grâce à nos parcours de formations et de certifications.
• Profiter d'évènements conviviaux tout au long de l'année !
• Un suivi aux petits oignons ! Un binôme Manager technique/RH vous accompagne au quotidien !

Le poste :

• Analyser les besoins fonctionnels et contribuer aux choix de conception technique.
• Développer et maintenir des traitements distribués en Java avec Apache Spark.
• Concevoir des pipelines de transformation et d'agrégation de données volumineuses.
• Optimiser les performances des traitements : partitionnement, jointures, gestion de la mémoire et utilisation des ressources.
• Développer les tests et garantir la qualité du code à travers les revues et les bonnes pratiques.
• Participer à l'industrialisation des développements et aux déploiements via les pipelines CI/CD.
• Diagnostiquer les anomalies et contribuer au maintien en conditions opérationnelles des applications.
• Rédiger la documentation technique et collaborer avec les équipes métiers, Data et infrastructure.

ENVIRONNEMENT TECHNIQUE :

Java, Apache Spark, Spark SQL, SQL, Git, Maven ou Gradle, CI/CD, Linux.

Profil recherché :

• Vous justifiez d'une expérience confirmée en développement Java et d'une pratique significative d'Apache Spark en production.
• Vous maîtrisez les traitements distribués, les API DataFrame/Dataset et les problématiques de performance liées aux volumes de données.
• Vous êtes à l'aise avec SQL et savez analyser un traitement pour identifier ses points de blocage.
• Vous justifiez d'au moins 3 ans d'expérience sur un contexte similaire.

Cette annonce est ouverte aux personnes en situation de handicap.