Data Engineer Talend / Google Cloud

SimplyHired; United States; Remote; USD 45,000 - 56,000; Full time

Job summary

SimplyHired cerca un Data Engineer con esperienza consolidata su Talend e conoscenza approfondita di Google Cloud Platform, in particolare BigQuery e Pub/Sub. La risorsa progetterà, svilupperà e manterrà pipeline ETL/ELT, integrando sorgenti eterogenee e ottimizzando flussi dati su GCP.

È richiesta autonomia, capacità di lavorare per requisiti, pattern architetturali e temi di Data Governance, con familiarità su Git e CI/CD.

Qualifications

• Esperienza concreta nello sviluppo di soluzioni di Data Integration con Talend.
• Ottima conoscenza di SQL.
• Esperienza con Google BigQuery.
• Conoscenza di Google Pub/Sub.
• Buona conoscenza dei principali servizi Google Cloud Platform.
• Esperienza nella progettazione e gestione di pipeline ETL/ELT.
• Buona comprensione dei principali pattern di Data Integration, batch, streaming ed event-driven.
• Capacità di progettare una soluzione indipendentemente dal prodotto utilizzato per implementarla.
• Familiarità con Git e processi CI/CD.
• Capacità di analizzare problematiche tecniche e lavorare con un buon livello di autonomia.

Responsibilities

• Progettazione, sviluppo e manutenzione di pipeline ETL/ELT tramite Talend.
• Integrazione di sorgenti dati eterogenee, database, API, file e sistemi applicativi.
• Sviluppo e ottimizzazione di flussi dati su Google Cloud Platform.
• Utilizzo di BigQuery per la gestione, trasformazione e analisi di grandi volumi di dati.
• Implementazione di integrazioni event-driven e near real-time tramite Google Pub/Sub.
• Progettazione delle pipeline a partire da requisiti funzionali e non funzionali, scegliendo pattern/tecnologie adeguati.
• Monitoraggio dei flussi e gestione delle anomalie.
• Collaborazione con Data Architect, Data Analyst, Data Scientist e team applicativi.
• Contributo a standard, best practice e linee guida di Data Engineering.
• Valutazione e adozione di nuove tecnologie quando utili al contesto progettuale.

Skills

Talend

SQL

Google BigQuery

Google Pub/Sub

GCP services

ETL/ELT design

CI/CD

Git

Python

Tools

Talend

BigQuery

Pub/Sub

GCP

Python

Git

CI/CD

Job description

Per ampliamento del nostro team Data siamo alla ricerca di un/una Data Engineer con esperienza consolidata su Talend e una buona conoscenza dell'ecosistema Google Cloud Platform, in particolare BigQuery e Pub/Sub.

Cerchiamo una persona con solide basi di Data Engineering, capace di affrontare i problemi partendo dai requisiti, dai dati e dai pattern architetturali, senza dipendere esclusivamente da uno specifico prodotto o tecnologia.

La persona lavorerà su progetti di integrazione, trasformazione e valorizzazione dei dati, collaborando con team tecnici e stakeholder di business nella progettazione e realizzazione di soluzioni affidabili, scalabili e manutenibili.

Attività principali

• Progettazione, sviluppo e manutenzione di pipeline ETL/ELT tramite Talend
• Integrazione di sorgenti dati eterogenee, database, API, file e sistemi applicativi
• Sviluppo e ottimizzazione di flussi dati su Google Cloud Platform
• Utilizzo di BigQuery per la gestione, trasformazione e analisi di grandi volumi di dati
• Implementazione di integrazioni event-driven e near real-time tramite Google Pub/Sub
• Progettazione delle pipeline a partire da requisiti funzionali e non funzionali, scegliendo di volta in volta pattern e tecnologie più adeguati
• Monitoraggio dei flussi e gestione delle anomalie
• Ottimizzazione delle performance e dei processi di elaborazione
• Collaborazione con Data Architect, Data Analyst, Data Scientist e team applicativi
• Contributo alla definizione di standard, best practice e linee guida di Data Engineering
• Valutazione e adozione di nuove tecnologie quando utili al contesto progettuale

Competenze richieste

• Esperienza concreta nello sviluppo di soluzioni di Data Integration con Talend
• Ottima conoscenza di SQL
• Esperienza con Google BigQuery
• Conoscenza di Google Pub/Sub
• Buona conoscenza dei principali servizi Google Cloud Platform
• Esperienza nella progettazione e gestione di pipeline ETL/ELT
• Buona comprensione dei principali pattern di Data Integration, batch, streaming ed event-driven
• Capacità di progettare una soluzione indipendentemente dal prodotto utilizzato per implementarla
• Familiarità con Git e processi CI/CD
• Capacità di analizzare problematiche tecniche e lavorare con un buon livello di autonomia

Competenze gradite

• Familiarità con architetture Lakehouse e formati dati moderni
• Conoscenza di Python
• Esperienza o conoscenza di Databricks
• Esperienza con piattaforme di orchestrazione dei workflow dati
• Conoscenza di strumenti e pratiche di Data Governance e Data Quality
• Familiarità con use case AI, Machine Learning o Generative AI
• Conoscenza dei principali pattern di integrazione tra Data Platform e soluzioni AI
• Esperienza con sistemi di messaggistica ed elaborazioni streaming
• Conoscenza di architetture Cloud e Data Warehouse

Esperienze di dominio gradite

Costituisce titolo preferenziale aver lavorato su progetti in ambito GDO o Retail, con familiarità rispetto ad alcuni dei seguenti processi:

• Vendite e dati di punto vendita
• Anagrafiche prodotto
• Promozioni e pricing
• Loyalty e customer data
• Supply chain e logistica
• Disponibilità e movimentazione della merce

Il profilo che cerchiamo

Cerchiamo un Data Engineer che non sia semplicemente uno specialista di prodotto.

La conoscenza approfondita di Talend è importante per il ruolo, ma ci interessa soprattutto una persona che abbia costruito competenze solide sui concetti alla base del Data Engineering e che sappia trasferirle tra tecnologie differenti.

Ci aspettiamo quindi capacità di ragionare in termini di architetture, pattern, qualità del dato, performance, affidabilità e manutenibilità, scegliendo gli strumenti come mezzo per realizzare la soluzione e non come punto di partenza.

È particolarmente apprezzata la curiosità verso nuove piattaforme e paradigmi, dal Lakehouse all'AI, accompagnata dalla capacità di apprendere rapidamente tecnologie diverse quando il contesto progettuale lo richiede.

La retribuzione annua lorda prevista è compresa tra 40.000 e 50.000 euro, in funzione della seniority e delle competenze effettivamente espresse dal candidato.

Ai sensi del D.Lgs. 198/2006 e della normativa vigente in materia di pari opportunità, l'offerta di lavoro è rivolta a candidati e candidate di entrambi i sessi. La selezione sarà effettuata nel rispetto dei principi di parità di trattamento, pari opportunità e non discriminazione.