Data Engineer: Azure Databricks Lakehouse, Remote

agap2 Italia; Italia; In loco; EUR 30.000 - 35.000; Tempo pieno

Vantaggi offerti da questo lavoro

Full Time

Buoni pasto giornalieri

Full Remote

Formazione (hard e soft skills)

Follow-up HR e Business Manager

Piano di crescita professionale

Descrizione del lavoro

AGAP2 Italia è alla ricerca di un Data Engineer per un’importante azienda partner nel settore Finance & Data Analytics. Il candidato lavorerà in un team internazionale, progettando pipeline dati ad alte prestazioni con Azure Databricks, PySpark e Delta Lake.

La posizione prevede attività su integrazione, trasformazione e modellazione di grandi volumi di dati finanziari, con attenzione a qualità e performance e metodologie Agile. Lavoro in remote full time in Italia.

Competenze

• Laurea in Informatica o Ingegneria Informatica o discipline affini.
• Esperienza di almeno 5 anni come Data Engineer o Software Engineer in contesti Data.
• Ottima conoscenza di Python.
• Solida esperienza nello sviluppo con Apache Spark (PySpark).
• Esperienza nella gestione di Delta Lake e SQL.
• Conoscenza della piattaforma Azure Databricks.
• Gradita esperienza con Azure Data Factory e strumenti CI/CD.
• Buona conoscenza della lingua inglese (livello B2).

Mansioni

• Progettare, sviluppare e ottimizzare pipeline dati utilizzando Python e PySpark.
• Realizzare processi di integrazione, trasformazione e modellazione di grandi volumi di dati strutturati.
• Sviluppare soluzioni su architettura Lakehouse utilizzando Azure Databricks, Azure Data Factory e Azure Data Lake.
• Implementare logiche di business e modelli dati garantendo qualità, affidabilità e performance.
• Collaborare con team cross-funzionali seguendo metodologie Agile e SDLC.
• Automatizzare test e processi di rilascio attraverso strumenti CI/CD.
• Contribuire allo sviluppo di pipeline dati orientate all'AI.

Conoscenze

Python

Apache Spark PySpark

SQL

Data engineering

Formazione

Laurea in Informatica o Ingegneria Informatica o discipline affini

Strumenti

Azure Databricks

Delta Lake

Azure Data Factory

CI/CD

Descrizione del lavoro

AGAP2 Italia è alla ricerca di un Data Engineer per un’importante azienda partner nel settore Finance & Data Analytics. Il candidato lavorerà in un team internazionale, progettando pipeline dati ad alte prestazioni con Azure Databricks, PySpark e Delta Lake.

La posizione prevede attività su integrazione, trasformazione e modellazione di grandi volumi di dati finanziari, con attenzione a qualità e performance e metodologie Agile. Lavoro in remote full time in Italia.