Data Engineer Talend / Google Cloud

Beta 80; Lombardia; On-site; EUR 40,000 - 50,000; Full time

Job summary

Beta 80 è una società ICT italiana con oltre tre decenni di attività e circa 550 professionisti. Cerchiamo un Data Engineer con esperienza consolidata su Talend e una buona conoscenza dell'ecosistema Google Cloud Platform, in particolare BigQuery e Pub/Sub.

Il ruolo prevede lo sviluppo e la manutenzione di pipeline ETL/ELT, integrazione di sorgenti dati eterogenee e collaborazione con team di business e tecnica per progetti affidabili, scalabili e manutenibili.

Qualifications

• Esperienza concreta nello sviluppo di soluzioni di Data Integration con Talend.
• Conoscenza avanzata di SQL e gestione di pipeline ETL/ELT su piattaforme cloud.
• Rapida familiarità con BigQuery e Google Pub/Sub per l’elaborazione di grandi volumi di dati.

Responsibilities

• Progettazione, sviluppo e manutenzione di pipeline ETL/ELT su Talend.
• Integrazione di sorgenti dati eterogenee, database, API, file e sistemi applicativi.
• Sviluppo e ottimizzazione di flussi dati su Google Cloud Platform.
• Utilizzo di BigQuery per gestione, trasformazione e analisi di grandi volumi di dati.
• Implementazione di integrazioni event-driven e near real-time con Google Pub/Sub.
• Progettazione delle pipeline partendo da requisiti funzionali e non funzionali.
• Monitoraggio dei flussi e gestione delle anomalie, miglioramento performance.

Tools

Talend

SQL

Google BigQuery

Google Pub/Sub

Google Cloud Platform

ETL/ELT pipelines

Git

CI/CD

Job description

Beta 80 è una società ICT presente sul mercato da più di trent'anni. Ad oggi, conta circa 550 professionisti e si pone lo scopo di trovare e fornire le soluzioni più idonee a favorire la Digital Transformation e il vantaggio competitivo dei propri clienti.

Beta 80, grazie alle competenze acquisite su clienti leader si mercato, offre soluzioni basate sia su tecnologia proprietaria, sia su best-of-breed di mercato e opera attraverso tre Business Unit:

Ricerchiamo:

Per ampliamento del nostro team Data siamo alla ricerca di un/una Data Engineer con esperienza consolidata su Talend e una buona conoscenza dell'ecosistema Google Cloud Platform, in particolare BigQuery e Pub/Sub.

Cerchiamo una persona con solide bases di Data Engineering, capace di affrontare i problemi partendo dai requisiti, dai dati e dai pattern architetturali, senza dipendere esclusivamente da uno specifico prodotto o tecnologia.

La persona lavorerà su progetti di integrazione, trasformazione e valorizzazione dei dati, collaborando con team tecnici e stakeholder di business nella progettazione e realizzazione di soluzioni affidabili, scalabili e manutenibili.

Attività principali

• Progettazione, sviluppo e manutenzione di pipeline ETL/ELT tramite Talend
• Integrazione di sorgenti dati eterogenee, database, API, file e sistemi applicativi
• Sviluppo e ottimizzazione di flussi dati su Google Cloud Platform
• Utilizzo di BigQuery per la gestione, trasformazione e analisi di grandi volumi di dati
• Implementazione di integrazioni event-driven e near real-time tramite Google Pub/Sub
• Progettazione delle pipeline a partire da requisiti funzionali e non funzionali, scegliendo di volta in volta pattern e tecnologie più adeguati
• Monitoraggio dei flussi e gestione delle anomalie
• Ottimizzazione delle performance e dei processi di elaborazione
• Collaborazione con Data Architect, Data Analyst, Data Scientist e team applicativi
• Contributo alla definizione di standard, best practice e linee guida di Data Engineering
• Valutazione e adozione di nuove tecnologie quando utili al contesto progettuale

Competenze richieste

• Esperienza concreta nello sviluppo di soluzioni di Data Integration con Talend
• Ottima conoscenza di SQL
• Esperienza con Google BigQuery
• Conoscenza di Google Pub/Sub
• Buona conoscenza dei principali servizi Google Cloud Platform
• Esperienza nella progettazione e gestione di pipeline ETL/ELT
• Buona comprensione dei principali pattern di Data Integration, batch, streaming ed event-driven
• Capacità di progettare una soluzione indipendentemente dal prodotto utilizzato per implementarla
• Familiarità con Git e processi CI/CD
• Capacità di analizzare problematiche tecniche e lavorare di un buon livello di autonomia

Competenze gradite

• Familiarità con architetture Lakehouse e formati dati moderni
• Conoscenza di Python
• Esperienza o conoscenza di Databricks
• Esperienza con piattaforme di orchestrazione dei workflow dati
• Conoscenza di strumenti e pratiche di Data Governance e Data Quality
• Familiarità con use case AI, Machine Learning o Generative AI
• Conoscenza dei principali pattern di integrazione tra Data Platform e soluzioni AI
• Esperienza con sistemi di messaggistica ed elaborazioni streaming
• Conoscenza di architetture Cloud e Data Warehouse

Esperienze di dominio gradite

• Vendite e dati di punto vendita
• Anagrafiche prodotto
• Promozioni e pricing
• Disponibilità e movimentazione della merce

Il profilo che cerchiamo

Cerchiamo un Data Engineer che non sia semplicemente uno specialista di prodotto.

La conoscenza approfondita di Talend è importante per il ruolo, ma ci interessa soprattutto una persona che abbia costruito competenze solide sui concetti alla base del Data Engineering e che sappia trasferirle tra tecnologie differenti.

Ci aspettiamo quindi capacità di ragionare in termini di architetture, pattern, qualità del dato, performance, affidabilità e manutenibilità, scegliendo gli strumenti come mezzo per realizzare la soluzione e non come punto di partenza.

È particolarmente apprezzata la curiosità verso nuove piattaforme e paradigmi, dal Lakehouse al AI, accompagnata dalla capacità di apprendere rapidamente tecnologie diverse quando il contesto progettuale lo richiede.

La retribuzione annua lorda prevista è compresa tra 40.000 e 50.000 euro, in funzione della seniority e delle competenze effettivamente espresse dal candidato.

Ai sensi del D.Lgs. 198/2006 e della normativa vigente in materia di pari opportunità, l'offerta di lavoro è rivolta a candidati e candidate di entrambi i sessi. La selezione sarà effettuata nel rispetto dei principi di parità di trattamento, pari opportunità e non discriminazione.