Data Engineer

ADENTIS Italia; Italia; On-site; EUR 28,000 - 35,000; Full time

Job summary

ADENTIS Italia cerca un Data Engineer per progettare e sviluppare pipeline dati affidabili, sia batch che streaming, nell’ecosistema Databricks e Lakehouse. La risorsa sarà coinvolta in sviluppo, amministrazione, ottimizzazione performance, monitoraggio qualità dati e pratiche CI/CD, con uso intensivo di Python (PySpark) e SQL.

Si lavora con Delta Lake, Unity Catalog e Delta Live Tables, gestendo governance e accessi.

Qualifications

• Conoscenza di pipeline ETL/ELT e processi batch/streaming.
• Abilità nell’uso di Databricks e Lakehouse.
• Ottima conoscenza di SQL avanzato e data modeling.
• Esperienza con Python per data engineering (PySpark, Pandas).
• Gestione governance e accessi ai dati (Unity Catalog).
• Esperienza con CI/CD per piattaforme dati.

Responsibilities

• Progettare e implementare pipeline ETL/ELT affidabili.
• Sviluppare pipeline batch e streaming e orchestrazione.
• Lavorare su Databricks, ottimizzando performance e governance.
• Applicare framework di data validation e CI/CD su piattaforme dati.

Skills

Python

SQL

PySpark

Pandas

Data Modeling

Git

CI/CD

Spark SQL

Tools

Databricks

Apache Spark

Delta Lake

Unity Catalog

Delta Live Tables

Databricks Workflows

Auto Loader

Job description

ADENTIS Italia è un gruppo europeo di consulenza ingegneristica e operativa facente parte del Gruppo MoOngy.

Presente in 12 paesi europei con oltre 8.500 dipendenti, abbiamo aperto, da quattro anni, la prima sede italiana a Milano e, vista la continua crescita, stiamo rafforzando e ampliando il nostro team con persone che condividano gli stessi valori della nostra società: AMBIZIONE, SORRISO, DINAMISMO, VOGLIA DI METTERSI IN GIOCO, il tutto in una realtà in continua evoluzione, nella quale le relazioni umane sono sempre al primo posto.

Posizione:

Data Engineer

Descrizione del ruolo

Siamo alla ricerca di un/una Data Engineer con competenze solide nella progettazione e nello sviluppo di pipeline dati e nell'ecosistema Databricks e Lakehouse.

La risorsa si occuperà di progettare, sviluppare e mantenere pipeline di dati affidabili, scalabili e di qualità, lavorando sia su processi batch sia su processi streaming.

Il ruolo prevede un coinvolgimento diretto nello sviluppo e nell'amministrazione della piattaforma Databricks, nell'ottimizzazione delle performance, nel monitoraggio della qualità dei dati e nell'adozione di buone pratiche CI/CD per le piattaforme dati.

Responsabilità

• Progettare e implementare processi ETL/ELT.
• Sviluppare e orchestrare pipeline di dati in modalità batch e streaming.
• Sviluppare soluzioni in Python (PySpark, Pandas) per l'elaborazione dei dati.
• Scrivere e ottimizzare query SQL avanzate, curando data modeling e performance tuning.
• Lavorare sulla piattaforma Databricks, sia in sviluppo sia in amministrazione.
• Sviluppare con Apache Spark (PySpark e Spark SQL) e Delta Lake.
• Gestire governance e accessi ai dati con Unity Catalog.
• Realizzare pipeline con Delta Live Tables (DLT), Databricks Workflows e Auto Loader.
• Implementare framework di data validation e attività di monitoraggio della qualità dei dati e di riconciliazione.
• Applicare pratiche di CI/CD alle piattaforme dati.
• Utilizzare Git per il controllo di versione del codice.
• Ottima conoscenza di SQL avanzato (query optimization, data modeling, performance tuning).
• Solida esperienza in Python per il data engineering (PySpark, Pandas, framework di data validation).
• Esperienza nella progettazione e implementazione di processi ETL/ELT.
• Esperienza con elaborazione dati batch e streaming.
• Conoscenza delle pratiche CI/CD per piattaforme dati.
• Esperienza con Git.
• Esperienza con la piattaforma Databricks (amministrazione e sviluppo).
• Esperienza con Apache Spark (PySpark e Spark SQL) e Delta Lake.
• Conoscenza di Unity Catalog, Delta Live Tables (DLT), Databricks Workflows e Auto Loader.
• Contratto a tempo indeterminato o collaborazione in p.iva.
• Inserimento in un contesto ad alto contenuto tecnologico sull'ecosistema Databricks e Lakehouse.
• Collaborazione con team Data e specialisti della piattaforma.
• Ambiente dinamico, qualificato e orientato all'innovazione.

La retribuzione annua lorda per questo ruolo è compresa tra 28.000 EUR e 35.000 EUR.

Il posizionamento all'interno del range sarà definito in base alle competenze tecniche, all'esperienza specifica nel ruolo e agli esiti del processo di selezione, secondo criteri oggettivi e predefiniti. In presenza di profili con caratteristiche eccezionali rispetto al range indicato, una revisione potrà essere valutata previa approvazione interna

ADENTIS Italia è un equal opportunities employer: crediamo che tutte le forme di diversità siano fonte di arricchimento reciproco. Ci impegniamo a garantire un ambiente di lavoro inclusivo, nel quale ogni singola risorsa possa apportare un valore unico alla nostra realtà. Pertanto, accogliamo candidature senza distinzione di età, genere, nazionalità, disabilità, orientamento sessuale, religione o stato civile.

Inoltre, teniamo fede ai nostri impegni prestando attenzione alle risorse appartenenti alle categorie protette ai sensi degli articoli 1 e 18 della Legge 68/99.

I dati personali saranno trattati in conformità alle disposizioni contenute nel Regolamento UE 2016/679.