Senior Databricks Data Engineer - Global Projects & Growth
Sopra Steria
Una candidatura completa in un minuto — curriculum e lettera di presentazione personalizzati, pronti da inviare.
Vantaggi offerti da questo lavoro
Descrizione del lavoro
Sopra Steria sta selezionando un data engineer per progettare architetture dati moderne. Lavorerai a stretto contatto con Data Scientist e Data Architect per garantire pipeline scalabili su ambienti Cloud (Azure/AWS/GCP) e guidare design Medallion e Delta Lake, assicurando qualità e governance in scenari batch e streaming.
La posizione offre opportunità di crescita professionale in progetti nazionali e internazionali, in un contesto dinamico orientato all’innovazione.
Competenze
- Apache Spark
- Almeno 2 anni di esperienza su servizi cloud Microsoft Azure
- Esperto in data ingestion sia batch che streaming, focus su performance e qualità del dato
- Collaborazione cross-funzionale
- Orientamento alla qualità del dato
Mansioni
- Progettare, sviluppare e implementare pipeline di dati scalabili
- Ottimizzare carichi di lavoro in collaborazione con Data Scientist e Data Architect
- Guidare design dell’architettura Medallion (Bronze/Silver/Gold) e gestione Delta Lake
- Garantire data quality e risoluzione di colli di bottiglia in scenari batch e streaming
- Sviluppare pipeline ETL/ELT con Apache Spark (PySpark, Spark SQL, Scala)
- Gestire Data Lakehouse con partizionamento e indexing per performance
- Collaborare con ML e Power BI durante l’esposizione di dataset
- Automatizzare workflow con Databricks Jobs, CI/CD e monitoraggio qualità dati
Conoscenze
Strumenti
Descrizione del lavoro
Sopra Steria sta selezionando un data engineer per progettare architetture dati moderne. Lavorerai a stretto contatto con Data Scientist e Data Architect per garantire pipeline scalabili su ambienti Cloud (Azure/AWS/GCP) e guidare design Medallion e Delta Lake, assicurando qualità e governance in scenari batch e streaming.
La posizione offre opportunità di crescita professionale in progetti nazionali e internazionali, in un contesto dinamico orientato all’innovazione.
'/%3e%3cpath%20d='M101.744%2012.4726L102.894%2016.1947L99.0021%2013.2201L101.744%2012.4726ZM105.3%208.40937H100.488L99.0026%203.59473L97.5116%208.41047L92.7%208.40385L96.5965%2011.3834L95.1055%2016.1942L99.0021%2013.2196L101.408%2011.3834L105.3%208.40992V8.40937Z'%20fill='white'/%3e%3cdefs%3e%3clinearGradient%20id='paint0_linear_5593_1381'%20x1='90'%20y1='9.44471'%20x2='99'%20y2='9.44471'%20gradientUnits='userSpaceOnUse'%3e%3cstop%20stop-color='%2300AD70'/%3e%3cstop%20offset='0.998594'%20stop-color='%2300B67A'/%3e%3cstop%20offset='1'%20stop-color='%23DCDCE6'/%3e%3c/linearGradient%3e%3c/defs%3e%3c/svg%3e){kind=small}
