Global Data Engineer - Lakehouse, AI & BI Insights

Socotec; Palaiseau; On-site; EUR 75,000 - 110,000; Full time

Benefits offered by this job

Cloud Pratictioner AWS & AWS Certified

AWS Certified Machine Learning - AWS

Job summary

SOCOTEC, au sein du Data & IA Hub, conçoit, déploie et maintient l’architecture Data du groupe à l’échelle internationale. Vous contribuerez à moderniser le Lakehouse SOCOTEC et participerez à des projets concrets de valorisation des données, de la conception à la data visualisation.

Vous travaillerez sur trois missions principales: développer des pipelines de données, améliorer la gouvernance et la qualité, et expérimenter des solutions d’IA générative pour transformer des requêtes en insights

Qualifications

• Master en Big Data, Informatique, ou Ingénierie logicielle.
• Maîtrise des bases de données SQL et NoSQL (modélisation, requêtes optimisées, intégrité).
• Bonne compréhension des architectures Big Data et outils distribués (Spark, Hadoop, Airflow, Kafka, Delta Lake).
• Expérience avec Git, GitLab, Jupyter Notebooks et VS Code.
• Connaissances des services cloud AWS (S3, Lambda, EMR, Glue, Redshift).
• Connaissances des principes ETL/ELT, Data Lakehouse et DataOps (CI/CD, monitoring, qualité de données).
• Intérêt pour l’IA Générative et son intégration dans les plateformes Data.
• Anglais courant et technique, à l’écrit comme à l’oral.

Responsibilities

• Développer des pipelines de données de bout en bout et visualiser les résultats (Power BI/Databricks SQL).
• Améliorer le Lakehouse SOCOTEC: gouvernance, qualité et pseudonymisation des données.
• Expérimenter des solutions d’IA générative appliquées à la data pour transformer des requêtes en insights.

Skills

SQL

NoSQL

Spark

Airflow

Kafka

Delta Lake

AWS

GitLab

Jupyter Notebooks

VS Code

DataOps

Anglais technique

Esprit d’équipe

Education

Master en Big Data / Informatique / Ingénierie logicielle

Tools

Databricks

Airbyte

Spark

GitLab

Lambda

Redshift

S3

Job description

SOCOTEC, au sein du Data & IA Hub, conçoit, déploie et maintient l’architecture Data du groupe à l’échelle internationale. Vous contribuerez à moderniser le Lakehouse SOCOTEC et participerez à des projets concrets de valorisation des données, de la conception à la data visualisation.

Vous travaillerez sur trois missions principales: développer des pipelines de données, améliorer la gouvernance et la qualité, et expérimenter des solutions d’IA générative pour transformer des requêtes en insights