Senior Databricks Data Engineer | Data Lakehouse & Spark

Sopra Steria; Padova; In loco; EUR 33.000 - 40.000; Tempo pieno

Vantaggi offerti da questo lavoro

Rialzo 33k-40k €

Trasferte nazionali/internazionali

Ambiente dinamico e progetti internaz.

Opportunità di crescita

Descrizione del lavoro

Sopra Steria cerca un Data Engineer per progettare architetture dati moderne e robuste. Lavorerai con Data Scientist e Data Architect per pipeline scalabili su Cloud Azure/AWS/GCP, guidando design Medallion e gestione Delta Lake in contesti batch e streaming.

Parteciperai a progetti internazionali, contribuendo alla trasformazione digitale dei clienti e collaborando con ML e Power BI. Richiesta attenzione a data quality e governance, con opportunità di crescita professionale e trasferte

Competenze

• Esperienza con Apache Spark su pipeline batch/ streaming.
• Almeno 2 anni di esperienza con Microsoft Azure.
• Capacita' di progettare pipeline dati scalabili e governare la qualità del dato.

Mansioni

• Progettare, sviluppare e implementare pipeline di dati scalabili.
• Ottimizzare carichi di lavoro in collaborazione con Data Scientist e Data Architect.
• Guidare design dell’architettura Medallion (Bronze/Silver/Gold) e gestione Delta Lake.
• Garantire data quality e risoluzione di colli di bottiglia in scenari batch e streaming.
• Sviluppare pipeline ETL/ELT con Spark (PySpark, Spark SQL, Scala).
• Gestire Data Lakehouse con partizionamento e indexing per performance.
• Collaborare con ML e Power BI durante l’esposizione di dataset.
• Automatizzare workflow con Databricks Jobs, CI/CD e monitoraggio qualità dati.

Conoscenze

Apache Spark

Azure

Data ingestion

Data quality

Cross-functional collaboration

Medallion architecture

Strumenti

Databricks

Spark SQL

Scala

Descrizione del lavoro

Sopra Steria cerca un Data Engineer per progettare architetture dati moderne e robuste. Lavorerai con Data Scientist e Data Architect per pipeline scalabili su Cloud Azure/AWS/GCP, guidando design Medallion e gestione Delta Lake in contesti batch e streaming.

Parteciperai a progetti internazionali, contribuendo alla trasformazione digitale dei clienti e collaborando con ML e Power BI. Richiesta attenzione a data quality e governance, con opportunità di crescita professionale e trasferte