Data & AI Engineer – Databricks Lakehouse, Python & CI/CD

Amaris Consulting; Modena; Hybrid; EUR 45,000 - 65,000; Full time

Benefits offered by this job

Buoni pasto

Opzioni di lavoro flessibili

Assicurazione sanitaria e benessere

Job summary

Amaris Consulting è una società di consulenza indipendente con focus su soluzioni Data & AI. Entrerai a far parte del team Data & AI, progettando e ottimizzando pipeline dati su Databricks in contesto internazionale.

La posizione prevede lavoro ibrido su Modena, con possibilità di collaborare con Data Scientist, Software Engineer e stakeholder di business per guidare progetti di Data Lakehouse.

Qualifications

• Esperienza 3/4 anni in data engineering o ruoli simili.
• Esperienza nello sviluppo con Python.
• Esperienza nell’utilizzo della piattaforma Databricks.
• Conoscenza di Apache Spark e dei concetti di elaborazione distribuita dei dati.
• Esperienza nella progettazione e sviluppo di pipeline ETL/ELT.
• SQL avanzato e modellazione dei dati.
• Esperienza con Delta Lake e Data Lakehouse.
• Conoscenza di database relazionali e sistemi di storage dati.
• Esperienza con Git e workflow di sviluppo collaborativo.
• Esperienza con pipeline CI/CD e strumenti di automazione.
• Conoscenza dei servizi cloud, preferibilmente Azure.

Responsibilities

• Analizzare, progettare e sviluppare pipeline dati su Databricks.
• Implementare data ingestion, trasformazione e distribuzione dati provenienti da sistemi interni/esterni.
• Sviluppare notebook, workflow e job automatizzati con Python e framework dedicati.
• Progettare architetture Data Lakehouse moderne e scalabili.
• Sviluppare componenti software, API e servizi backend per le piattaforme dati.
• Integrare Databricks con database, sistemi enterprise, cloud e ML.
• Garantire qualità, affidabilità e monitoraggio delle pipeline.
• Gestire versionamento, rilascio e automazione tramite CI/CD.
• Collaborare con Data Scientist, Software Engineer, Cloud Engineer e stakeholder.

Skills

Python

Apache Spark

SQL

Data pipeline design

Git & versioning

CI/CD

Tools

Databricks

Azure

CI/CD tools

Job description

Amaris Consulting è una società di consulenza indipendente con focus su soluzioni Data & AI. Entrerai a far parte del team Data & AI, progettando e ottimizzando pipeline dati su Databricks in contesto internazionale.

La posizione prevede lavoro ibrido su Modena, con possibilità di collaborare con Data Scientist, Software Engineer e stakeholder di business per guidare progetti di Data Lakehouse.