Senior Databricks Engineer: Medallion & Delta Lake

Sopra Steria; Modena; In loco; EUR 33.000 - 40.000; Tempo pieno

Vantaggi offerti da questo lavoro

Rial tra 33.000 e 40.000

Transferte nazionali e internazionali

Ambiente dinamico e progetti internaz.

Opportunità di crescita professionale

Descrizione del lavoro

Sopra Steria cerca un Data Engineer per integrare il centro di competenza Data Engineering. Progetterai architetture dati moderne e robuste, lavorando vicino a Data Scientist e Data Architect per garantire pipeline scalabili su ambienti cloud (Azure/AWS/GCP).

Avrai responsabilità su design Medallion e gestione Delta Lake, assicurando quality e governance in contesti Batch e Streaming, con possibilità di progetti internazionali e crescita professionale.

Competenze

• Esperienza con architetture di flusso dati e pipeline scalabili.
• Conoscenza di sistemi Cloud (Azure) e strumenti di data engineering.
• Capacità di garantire qualità del dato e governance.

Mansioni

• Progettare, sviluppare e implementare pipeline di dati scalabili
• Ottimizzare carichi di lavoro con Data Scientist e Data Architect
• Guidare design dell’architettura Medallion (Bronze/Silver/Gold) e gestione Delta Lake
• Garantire data quality e risoluzione di colli di bottiglia in scenari batch e streaming
• Sviluppare pipeline ETL/ELT con Apache Spark (PySpark, Spark SQL, Scala)
• Gestire Data Lakehouse con partizionamento e indexing per performance
• Collaborare con ML e Power BI durante l’esposizione di dataset
• Automatizzare workflow con Databricks Jobs, CI/CD e monitoraggio qualità dati

Conoscenze

Apache Spark

Azure

Data ingestion

Cross-functional

Data quality

Strumenti

Databricks

Delta Lake

Spark SQL

PySpark

Descrizione del lavoro

Sopra Steria cerca un Data Engineer per integrare il centro di competenza Data Engineering. Progetterai architetture dati moderne e robuste, lavorando vicino a Data Scientist e Data Architect per garantire pipeline scalabili su ambienti cloud (Azure/AWS/GCP).

Avrai responsabilità su design Medallion e gestione Delta Lake, assicurando quality e governance in contesti Batch e Streaming, con possibilità di progetti internazionali e crescita professionale.