Data Engineer Databricks sur Site ou Full Remote H / F

Astek; Bordeaux; À distance; EUR 40 000 - 55 000; Plein temps

Résumé du poste

Une entreprise en ingénierie à Bordeaux recherche un Data Engineer pour développer et maintenir des pipelines de données ETL en Python. Vous serez responsable de l'intégration des données sur une base Postgres dans un environnement cloud Azure, ainsi que de l'optimisation des bases de données. Une expérience de 3 ans minimum en développement Python et une maîtrise d'Azure sont requises. Rejoignez une équipe dynamique sur des projets d'innovation dans l'aéronautique.

Qualifications

• Au moins 3 années d'expérience dans le développement Python.
• Maîtrise d'une plateforme cloud Azure.
• Expérience avec les outils de gestion de versions est un plus.

Responsabilités

• Développer et maintenir les pipelines de données ETL en Python.
• Intégrer les données sur une base Postgres dans un environnement cloud Azure.
• Concevoir et orchestrer les pipelines de données à l'aide de Azure Databricks et Azure Data Factory.

Connaissances

Python

Postgres

ETL

Azure Databricks

Cloud Azure

SQL

Anglais

Formation

Diplôme d'ingénieur spécialisé dans la data engineer

Description du poste

Overview

Ce que nous allons accomplir ensemble :
Intervenir sur des projets techniques dédiés à l'analyse de données de production et de recherche et développement (R&D) dans le domaine de l'aéronautique de demain. Vous serez responsable du flux de données et du développement de ces derniers afin d'améliorer les processus de fabrication, d'optimiser les performances des avions et de contribuer aux projets de R&D innovants.

Votre mission (si vous l'acceptez !) :

Développer et maintenir les pipelines de données ETL en Python.

Intégrer les données sur une base Postgres dans un environnement cloud Azure.

Concevoir et orchestrer les pipelines de données à l'aide de Azure Databricks et Azure Data Factory, compétences indispensables pour ce poste.

Optimiser les bases de données PostgreSQL.

Rédiger des scripts Python et SQL pour extraire, transformer et charger les données.

Résoudre des incidents techniques liés aux flux de données et aux environnements cloud.

Comprendre les demandes techniques du client et l'accompagner dans la gestion, la transformation et la valorisation des données.

Stack de Jeu

• Anglais
• DATABRICKS
• Python
• SQL
• CLOUD AZURE
• ETL

Votre future équipe

Rejoignez notre agence Bordelaise en plein essor et participez à des projets d'envergure !

Vous travaillerez sur des projets à forte valeur ajoutée sur les problématiques d'innovations du moment.

Vous

• Diplôme d'ingénieur spécialisé dans la data engineer et plus précisément avec l'outil Databricks
• Au moins trois années d'expérience dans le développement python
• Maitrise d'une plateforme cloud Azure
• Expérience avec les outils de gestion de versions et de data engineering est un plus
• Vous avez une bonne maitrise de l'anglais et vous avez envie de rejoindre une équipe dynamique