Data Engineer (H / F)

Extia; Bordeaux; Sur place; EUR 40 000 - 60 000; Plein temps

Résumé du poste

Une entreprise spécialisée en data recherche un professionnel pour gérer des architectures de données et exécuter des processus ETL. Vous travaillerez avec les Data Scientists sur des ensembles de données complexes. La maîtrise de Python, des concepts de Big Data et une connaissance de l'environnement Linux sont requises. Cette opportunité est ouverte à Bordeaux.

Qualifications

• Maîtrise de l'analyse statistique requise.
• Scripts en Python et/ou R nécessaires.
• Expérience en stockage de fichiers volumineux est un plus.

Responsabilités

• Participer à la définition des besoins et rédaction des User Stories.
• Collaborer avec les Data Scientists sur le développement des modules d’analyse.
• Concevoir et construire des architectures de données.

Connaissances

ETL

Data mining

Machine learning

Big Data

Théorie des graphes

Python

R

Environnement Linux

Outils

HDFS

Data Lake

S3

AWS

GCP

Java

Scala

SAS

Description du poste

Qui

Vous êtes habitué à travailler aussi bien avec des méta-données qu’avec des données non-structurées. À cet effet, vous maîtrisez un ou plusieurs des concepts tels que l’ETL, le Data mining, le Machine learning, les Big Data ou encore la Théorie des graphes, par exemple.

Vous maîtrisez les bases de l’analyse statistique

Vous êtes apte à rédiger des scripts en Python et / ou R, et une connaissance d'autres langages de programmation comme Java, Scala ou SAS est un plus.

Vous êtes familiarisé avec l’environnement Linux

Une expérience avec les outils de stockage de fichiers volumineux (HDFS, Data Lake, S3, stockage Blob), la connaissance des infrastructures cloud AWS ou GCP, et des bases en streaming temps réel seront aussi de réels atouts.

Ensuite quoi

Vous serez en charge de :

• Participer à la définition des besoins et à la rédaction des User Stories
• Collaborer avec les Data Scientists au développement des modules d’analyse de données
• Concevoir et construire des architectures de données
• Intégrer des sources de données
• Vous assurer que les données sont facilement accessibles et que leur exploitation fonctionne comme demandé, même dans des circonstances hautement évolutives
• Exécuter des processus ETL (extract, transform, load) à partir d'ensembles de données complexes et / ou volumineux