Databricks Expert - Data Engineer/Data Architect

NTT DATA; Milano; Ibrido; EUR 40.000 - 60.000; Tempo pieno

Descrizione del lavoro

Una società di consulenza globale è alla ricerca di un Data Engineer esperto per lavorare in progetti di Big Data. Il candidato ideale avrà esperienza in ambienti cloud, conoscenza di SQL e competenze in strumenti come Databricks e Azure Data Factory. La posizione offre l'opportunità di supportare clienti in progetti innovativi nella trasformazione dei dati.

Competenze

• 5+ anni di esperienza su Databricks preferiti.
• Esperienza nel migrare workload da on premise a cloud.
• Competenze in SQL richieste.

Mansioni

• Supportare i clienti in progetti di Big Data.
• Concepire e realizzare trasformazioni e caricamento dei dati.
• Operare in ambienti cloud nativi con soluzioni innovative.

Conoscenze

Cloud native environment experience

Big Data Architectures knowledge

Azure infrastructure experience

Experience in data monitoring

Java, Scala, Python skills

Team leadership experience

Experience with Apache Spark

Microsoft certification

Formazione

Certificazione Microsoft Azure o Databricks

Strumenti

Databricks

Azure Data Factory

Grafana

Prometheus

Descrizione del lavoro

Overview

NTT DATA Italia è parte della multinazionale giapponese NTT DATA, uno dei principali player a livello mondiale nell’ambito della Consulenza e dei Servizi IT. Digitale, Consulenza, Cyber Security e System Integration sono solo alcune delle principali linee di business. La nostra missione è creare valore per i nostri clienti attraverso l’innovazione. NTT DATA conta su una presenza globale in oltre 50 Paesi, più di 150.000 professionisti e una rete internazionale di centri di ricerca e sviluppo; è presente in Italia con oltre 6000 dipendenti e in 11 città: Milano, Roma, Torino, Treviso, Genova, Bologna, Pisa, Napoli, Salerno, Bari e Cosenza. Abbiamo costruito una Smile Working Company in cui la cura, l’ascolto delle persone, il loro benessere e sviluppo delle competenze sono la nostra priorità.

Responsibilities

• Supportare i clienti in progetti di Big Data, collaborando con business analyst e solution architect per comprendere use case, bisogni di dati e obiettivi di outcome.
• Concepire e realizzare acquisizione, trasformazioni, miglioramento, pulizia, conversione, compressione e caricamento dei dati in data lake per l’analisi e modelli di machine learning.
• Operare in ambienti cloud nativi, offrendo soluzioni innovative ma semplici ai problemi quotidiani.
• Fare da ponte tra Data Science e Data Engineering, comprendendo entrambi i mondi; supportare data scientists e data engineers nel perseguire obiettivi comuni.

Required Skills

• Esperienza in un ambiente cloud nativo in almeno uno dei tre principali public cloud (GCP, AWS, Azure); 5+ anni di esperienza su Databricks sono preferiti.
• Esperienza e conoscenza di Big Data Architectures, cloud e on premise.
• Esperienza in infrastruttura Azure e networking.
• Esperienza nella costruzione e consegna di proof-of-concept per indirizzare specifiche esigenze di business, utilizzando tecniche, fonti dati e tecnologie adeguate.
• Esperienza nel migrare workload da on premise a cloud.
• Esperienza nel monitoraggio di infrastrutture distribuite, utilizzando strumenti Azure o open source (es. Grafana, Prometheus).
• Competenze in Java, Scala, Python e scripting shell; conoscenza SQL.
• Esperienza nel guidare team di media dimensione.
• Esperienza con Apache Spark, Databricks, Azure Data Factory, Azure Synapse e altri strumenti ETL/ELT Azure.
• Certificazione Microsoft: almeno una certificazione Azure o Databricks (Azure Data Engineer Associate, Azure Solutions Architect Expert, Databricks Spark Developer, Databricks Data Engineer, Databricks Machine Learning).

Desired Skills, Experiences and Certifications

• Esperienza con metodologie Agile e Kanban.
• Altre certificazioni Big Data (Cloudera, Databricks, ecc.) sono benvenute.
• Esperienza con soluzioni ETL/ELT non Azure (Talend, Oracle Data Integrator, Informatica PowerCenter, ecc.).
• Esperienza con soluzioni di Data Visualization (PowerBI, Qlik, Tableau, ecc.).

Location

Milano, Bari, Bologna, Cosenza, Napoli, Roma, Salerno, Torino, Treviso, Pisa