ETL Data Engineer (Databricks)

AESYS *; Italia; Ibrido; EUR 30.000 - 40.000; Tempo pieno

Descrizione del lavoro

AESYS è alla ricerca di un Data Engineer esperto con forte competenza in Azure e tecnologie di data engineering. La risorsa si occuperà della progettazione e implementazione di pipeline ETL/ELT su Azure, utilizzando Databricks, PySpark e ADF per orchestrare flussi di dati provenienti da sistemi relazionali e cloud.

Si richiede almeno 3 anni di esperienza, buone capacità in SQL/T-SQL e una buona conoscenza della lingua inglese per lavorare in contesti internazionali.

Competenze

• Almeno 3 anni di esperienza nel ruolo di Data Engineer.
• Esperienza nello sviluppo di processi ETL/ELT in ambiente Azure.
• Ottima conoscenza di Azure Databricks.
• Buona conoscenza di PySpark per la trasformazione e l'elaborazione dei dati.
• Ottima conoscenza di Azure Data Factory (ADF) per l'orchestrazione delle pipeline dati.
• Buona conoscenza di Python.
• Ottima conoscenza di SQL e T-SQL.
• Esperienza nell'integrazione di dati provenienti da database relazionali e sistemi cloud.
• Conoscenza di Azure Blob Storage.
• Conoscenza di Git per il versionamento del codice.
• Buona conoscenza della lingua inglese, con capacità di lavorare in un contesto internazionale.

Conoscenze

Azure Databricks

PySpark

Azure Data Factory

Python

SQL

T-SQL

Git

Azure Blob Storage

Inglese

ETL/ELT

Strumenti

Azure Stream Analytics

Delta Lake

Medallion Architecture

Descrizione del lavoro

• Almeno 3 anni di esperienza nel ruolo di Data Engineer.
• Esperienza nello sviluppo di processi ETL/ELT in ambiente Azure.
• Ottima conoscenza di Azure Databricks.
• Buona conoscenza di PySpark per la trasformazione e l'elaborazione dei dati.
• Ottima conoscenza di Azure Data Factory (ADF) per l'orchestrazione delle pipeline dati.
• Buona conoscenza di Python.
• Ottima conoscenza di SQL e T-SQL.
• Esperienza nell'integrazione di dati provenienti da database relazionali e sistemi cloud.
• Conoscenza di Azure Blob Storage.
• Conoscenza di Git per il versionamento del codice.
• Buona conoscenza della lingua inglese, con capacità di lavorare in un contesto internazionale.

Requisiti preferenziali (Nice to Have)

• Esperienza con Azure Stream Analytics.
• Esperienza nella progettazione di architetture dati basate su Delta Lake e Medallion Architecture (Bronze, Silver, Gold).
• Esperienza nella migrazione di piattaforme dati da ambienti on-premise verso Azure Cloud.
• Esperienza nella progettazione di soluzioni di Master Data Management (MDM).
• Conoscenza di Microsoft Dataverse e integrazione con sistemi CRM.
• Esperienza nella gestione della Schema Evolution su Delta Lake.
• Esperienza nell'implementazione di sistemi di sicurezza dei dati, come Row Level Security (RLS).
• Esperienza nell'ottimizzazione delle performance delle pipeline e dei database.
• Conoscenza di metodologie DevOps applicate ai progetti Data Engineering.
• Retribuzione tra i 30.000€ e i 40.000€, commisurata all'esperienza.
• Sede di lavoro: Ibrida o Remoto
• Inserimento in un contesto internazionale, con progetti innovativi in ambito Data Platform su Azure.
• Disponibilità: ASAP.

L'informativa sulla privacy sarà inviata insieme all'offerta di lavoro e il trattamento dei dati sarà effettuato per le finalità di selezione e gestione delle candidature, in conformità al Regolamento (UE) 2016/679 (GDPR).

AESYS garantisce (ai sensi del D.Lgs. 198/2006, D.Lgs. 215/2003 e D.Lgs. 216/2003) pari opportunità di accesso al lavoro a tutte le persone candidate ed è impegnata nel favorire un ambiente di lavoro inclusivo e rispettoso delle differenze di genere.