AWS Data Engineer

WHIZE; Neuilly-sur-Seine; Hybride; EUR 70 000 - 95 000; Plein temps

Avantages offerts par ce poste

Télétravail partiel

Résumé du poste

WHIZE, filiale du groupe Neurones, recherche un AWS Data Engineer pour concevoir et optimiser des flux de données sur l’écosystème AWS. Vous travaillerez sur des pipelines, intégrerez des sources variées et appliquerez des services AWS pour garantir des données fiables et sécurisées.

Profil idéal: expérience en Data Engineering sur AWS, maîtrise du SQL et de PySpark, connaissance des Data Lake/Warehouse sur AWS et sensibilité à la sécurité et à l’optimisation des coûts.

Qualifications

• Expérience en Data Engineering, dont une partie significative sur AWS.
• Solides compétences en SQL et en programmation orientée Data.
• Maîtrise d’au moins plusieurs services AWS orientés data (Glue, Redshift, S3, Athena, EMR, Kinesis…).
• Expérience avec PySpark ou Spark pour le traitement de données.
• Connaissance des architectures Data Lake et Data Warehouse sur AWS.
• Sensibilité aux problématiques de sécurité, gouvernance et optimisation des coûts.
• Capacité à travailler en équipe et à communiquer avec des profils techniques et métiers.

Responsabilités

• Concevoir, développer et maintenir des pipelines de données sur AWS
• Intégrer et transformer des données issues de sources variées (bases SQL/NoSQL, API, ERP, CRM, fichiers plats…)
• Utiliser les services AWS tels que Glue, Lambda, Step Functions, Kinesis, S3, Athena, Redshift ou EMR
• Développer des traitements distribués et optimisés avec PySpark ou Spark sur AWS (EMR, Glue)
• Orchestrer et automatier les workflows avec AWS Step Functions, Managed Airflow ou équivalents
• Mettre en place des contrôles de qualité, cohérence et sécurité des données (IAM, KMS, Lake Formation…)
• Optimiser les performances des traitements et réduire les coûts d’infrastructure
• Documenter les flux et assurer leur traçabilité
• Collaborer avec les équipes Data et IT pour fournir des datasets prêts à l’emploi
• Participer à la veille technologique sur AWS et les solutions data cloud

Connaissances

Data Engineering

AWS Data Services

SQL Mastery

PySpark

Data Lake/Warehouse

Security & Governance

Team Collaboration

Outils

Glue

Redshift

S3

Athena

EMR

Kinesis

Lambda

Step Functions

Description du poste

Whize est une filiale du groupe Neurones (7000 collaborateurs en France), spécialisée dans le domaine de la Data Intelligence et du développement de solutions sur mesure en architecture Serverless. Notre positionnement se décline en 3 offres :

• Modern BI : expertise sur toute la chaine décisionnelle (Power BI, Tableau, AZURE Data Factory....)
• Data Engineering : Manipulation et préparation de la Data en utilisation Python et SQL avancé.
• Développement en Cloud Native: : développement d'applications (.Net, Java, Node.js, Python) basées sur les services managés du Cloud (AWS, Azure ou GCP)

En tant qu’AWS Data Engineer, vous serez responsable de la conception, du développement et de l’optimisation des flux de données sur l’écosystème AWS, afin de fournir aux équipes Data Analysts, Data Scientists et métiers des données fiables, sécurisées et performantes.

Vos responsabilités incluront :

• Concevoir, développer et maintenir des pipelines de données sur AWS
• Intégrer et transformer des données issues de sources variées (bases SQL/NoSQL, API, ERP, CRM, fichiers plats…)
• Utiliser les services AWS tels que Glue, Lambda, Step Functions, Kinesis, S3, Athena, Redshift ou EMR
• Développer des traitements distribués et optimisés avec PySpark ou Spark sur AWS (EMR, Glue)
• Orchestrer et automatiser les workflows avec AWS Step Functions, Managed Airflow ou équivalents
• Mettre en place des contrôles de qualité, cohérence et sécurité des données (IAM, KMS, Lake Formation…)
• Optimiser les performances des traitements et réduire les coûts d’infrastructure
• Documenter les flux et assurer leur traçabilité
• Collaborer avec les équipes Data et IT pour fournir des datasets prêts à l’emploi
• Participer à la veille technologique sur AWS et les solutions data cloud

Profil recherché :

• Expérience en Data Engineering, dont une partie significative sur AWS
• Solides compétences en SQL et en programmation orientée Data
• Maîtrise d’au moins plusieurs services AWS orientés data (Glue, Redshift, S3, Athena, EMR, Kinesis…)
• Expérience avec PySpark ou Spark pour le traitement de données
• Connaissance des architectures Data Lake et Data Warehouse sur AWS
• Sensibilité aux problématiques de sécurité, gouvernance et optimisation des coûts
• Capacité à travailler en équipe et à communiquer avec des profils techniques et métiers

Qu’attendez-vous pour nous rejoindre ?

• Vous ferez partie d’une société à taille humaine et qui bénéficie des avantages d'un grand groupe. Nous adressons une centaine de clients en direct dont la moitié sont des grands comptes.
• Vous serez accompagné(e) et managé(e) par le CEO de WHIZE (THE WHIZE MAN).
• Vous allez compléter notre équipe dynamique et travailler avec nous dans une ambiance Start-up et conviviale.
• Vous occuperez des postes intéressants et évolutifs.
• Vous bénéficierez des évènements internes organisés pour parler tech, business et projets.
• Vous réaliserez des projets à forte valeur ajoutée.

: Neuilly-Sur-Seine+ 2/3 jours de Télétravail