Data Engineer (DataBricks) sur site ou Full Remote (H / F) (CDI)

ASTEK; Castres-Gironde; À distance; EUR 40 000 - 55 000; Plein temps

Résumé du poste

Une entreprise spécialisée dans les transformations numériques recherche un Data Engineer pour développer et maintenir des pipelines ETL en Python. Le candidat doit avoir au moins 3 ans d'expérience, maîtriser Azure et PostgreSQL, et être capable de résoudre des incidents techniques. Un bon niveau d'anglais est requis. Ce poste est basé en Nouvelle-Aquitaine.

Qualifications

• Au moins trois années d’expérience dans le développement python.
• Maitrise d’une plateforme cloud Azure.
• Expérience avec les outils de gestion de versions et de data engineering est un plus.

Responsabilités

• Développer et maintenir les pipelines de données ETL en Python.
• Intégrer les données sur une base Postgres dans un environnement cloud Azure.
• Optimiser les bases de données PostgreSQL.
• Rédiger des scripts Python et SQL pour extraire, transformer et charger les données.
• Résoudre des incidents techniques liés aux flux de données et aux environnements cloud.

Connaissances

Développement Python

Intégration de données

Gestion de bases de données PostgreSQL

Cloud Azure

Anglais

Formation

Diplôme d’ingénieur spécialisé dans la data engineer

Outils

Azure Databricks

Azure Data Factory

Description du poste

Vue d’ensemble

Poste : Développer et maintenir les pipelines de données ETL en Python.

Intégrer les données sur une base Postgres dans un environnement cloud Azure.

Concevoir et orchestrer les pipelines de données à l’aide de Azure Databricks et Azure Data Factory, compétences indispensables pour ce poste.

Optimiser les bases de données PostgreSQL.

Rédiger des scripts Python et SQL pour extraire, transformer et charger les données.

Résoudre des incidents techniques liés aux flux de données et aux environnements cloud.

Comprendre les demandes techniques du client et l’accompagner dans la gestion, la transformation et la valorisation des données.

Profil

• Diplôme d’ingénieur spécialisé dans la data engineer et plus précisément avec l\'outil Databricks
• Au moins trois années d’expérience dans le développement python
• Maitrise d’une plateforme cloud Azure
• Expérience avec les outils de gestion de versions et de data engineering est un plus
• Vous avez une bonne maitrise de l’anglais et vous avez envie de rejoindre une équipe dynamique

Entreprise

Depuis 1988, nous intervenons au cœur des grandes transformations numériques mondiales et accompagnons nos clients avec le même niveau d’expertise et de valeur ajoutée partout où ils se trouvent.

Jour après jour, nous nous appuyons sur un business-model agile et sur l’expertise technique approfondie de nos consultants et ingénieurs. Guidés par des valeurs fortes telles que l’audace, l’agilité, l’excellence, la fiabilité et l’esprit d’équipe, nous sommes tous animés par le même objectif : tirer le meilleur de la technologie pour construire un avenir durable.