Data Engineer - Data Lake, Spark & Airflow (Bologna)

Michael Page International Italia S.r.l.; Bologna; In loco; EUR 27.000 - 38.000; Tempo pieno

Vantaggi offerti da questo lavoro

Buoni pasto 8€

Assicurazione sanitaria Fondo Est

Convenzioni aziendali

Descrizione del lavoro

Michael Page International Italia S.r.l. è alla ricerca di un Data Engineer da inserire a Bologna in un team IT/Data di circa 10 professionisti, impegnato in un progetto strategico di evoluzione della piattaforma dati.

La figura progetterà pipeline batch e near real-time, supporterà Data Lake e Delta Lake, e lavorerà con Spark, Airflow e Power BI. Sarà richiesto un ruolo chiave nel garantire qualità, requisiti e delivery.

Competenze

• Laurea Magistrale in Informatica, Ingegneria Informatica o discipline STEM.
• Esperienza di almeno 2–3 anni in ambito Data Engineering.
• Ottima conoscenza di SQL.
• Buona conoscenza di Python per data engineering e automazione.
• Esperienza concreta con Apache Spark, Apache Airflow, Delta Lake e Parquet.

Mansioni

• Progettazione, sviluppo e manutenzione di pipeline dati batch e near real-time.
• Supporto all'implementazione ed evoluzione del Data Lake aziendale.
• Modeling, trasformazione e consolidamento dati per reporting e BI.
• Implementazione e gestione di workflow con Apache Airflow.
• Sviluppo e ottimizzazione di job distribuiti con Apache Spark.
• Gestione di dataset Parquet e architetture basate su Delta Lake.
• Verifica alimentazione e trasformazione dati da sorgenti multiple.
• Monitoraggio qualità del dato e gestione delle anomalie.
• Supporto realizzazione di dataset per reporting e analytics (Power BI).
• Collaborazione con stakeholder e team per raccolta requisiti e delivery.

Conoscenze

SQL

Python

Power BI

Troubleshooting

Data Lake

Lakehouse

Formazione

Laurea Magistrale in Informatica o Ingegneria Informatica

Strumenti

Apache Spark

Apache Airflow

Delta Lake

Parquet

Descrizione del lavoro

Michael Page International Italia S.r.l. è alla ricerca di un Data Engineer da inserire a Bologna in un team IT/Data di circa 10 professionisti, impegnato in un progetto strategico di evoluzione della piattaforma dati.

La figura progetterà pipeline batch e near real-time, supporterà Data Lake e Delta Lake, e lavorerà con Spark, Airflow e Power BI. Sarà richiesto un ruolo chiave nel garantire qualità, requisiti e delivery.