Data Engineer Confirmà – Full Remote

Informatis-TS; Centre-Val de Loire; À distance; EUR 45 000 - 65 000; Plein temps

Résumé du poste

Informatis-TS recherche un Data Engineer Confirmé pour une mission majoritairement en télétravail avec des déplacements mensuels en Centre-Val de Loire. Vous travaillerez sur l'audit et l'optimisation de l'environnement Airflow, tout en collaborant avec des équipes non IT. Les compétences requises incluent une expertise confirmée en Airflow et Python. Une bonne communication et un sens rédactionnel sont également essentiels. Un casier judiciaire vierge et un niveau courant de Français sont requis.

Qualifications

• Minimum 2 à 3 ans d'expérience sur Airflow.
• Expérience en développement de pipelines data.
• Expérience en audit et optimisation d’environnements existants.

Responsabilités

• Réaliser un audit complet de l’existant Airflow.
• Identifier les axes d’amélioration et optimisations possibles.
• Optimiser les pipelines existants et développer de nouveaux flux data.
• Intervenir sur des sujets de contrôle documentaire et qualité des données.
• Produire une documentation technique complète.

Connaissances

Airflow

Python

PostgreSQL

Trino

DBeaver

Power BI / MSBI

SSIS

Outils

AWS

Pipelines data

Description du poste

Data Engineer Confirmé – Full Remote

Mission de longue durée avec un déplacement mensuel en Centre-Val de Loire. Le poste est majoritairement en télétravail, avec un déplacement occasionnel.

Contexte de la mission

Remplacement au sein de la DSI d’un acteur majeur du secteur de l’énergie. Vous interviendrez en binôme avec une ressource interne et collaborerez étroitement avec des équipes métiers, notamment des profils scientifiques non IT.

Objectifs de la mission

Reprendre et améliorer un environnement Airflow présentant certaines limites afin de proposer des axes d’amélioration concrets, tout en apportant votre recul, votre analyse des pratiques et votre expertise technique.

Missions principales

• Réaliser un audit complet de l’existant Airflow (organisation, usage, performance)
• Identifier les axes d’amélioration, les optimisations possibles et les risques techniques
• Optimiser les pipelines existants et développer de nouveaux flux data
• Intervenir sur des sujets de contrôle documentaire et de qualité des données
• Mettre en place des contrôles de cohérence et faire évoluer les flux data
• Accompagner les équipes métiers dans l’analyse de leurs problématiques
• Collaborer avec les différentes parties prenantes (métiers, DSI, responsables fonctionnels)
• Produire une documentation technique complète dans un environnement fortement normé

Environnement technique

• Airflow
• Python
• Trino
• PostgreSQL
• DBeaver
• Power BI / MSBI (apprécié)
• SSIS (ponctuel)
• AWS
• Pipelines data

Livrables attendus

• Audit de la plateforme Airflow
• Recommandations d’amélioration
• Pipelines optimisés et/ou développés
• Documentation technique détaillée
• Support aux équipes métiers

Compétences requises

• Airflow : niveau confirmé (indispensable)
• Python : niveau confirmé (indispensable)
• PostgreSQL : requis
• Trino : souhaité
• DBeaver : apprécié
• Power BI / MSBI : un plus
• SSIS : secondaire

Expérience

• Minimum 2 à 3 ans sur Airflow
• Expérience en développement de pipelines data
• Expérience en audit et optimisation d’environnements existants

Compétences fonctionnelles

• Capacité à challenger l’existant et à proposer des améliorations
• Bon niveau de communication avec des interlocuteurs non techniques
• Capacité de vulgarisation
• Rigueur rédactionnelle et sens de la documentation
• Aisance dans des environnements exigeants et structurés

Contraintes

• Français courant requis
• Casier judiciaire vierge