Junior Data Engineer AWS/ETL/DEVOPS

SILICONDEV SPA; Milano; Hybrid; EUR 30,000 - 45,000; Full time

Job summary

SiliconDev SPA cerca un Junior Data Engineer - DevOps a Milano in regime ibrido. Lavorerai su pipeline ETL con Airflow e AWS Lambda, gestendo batch con AWS Batch e Fargate, e lavorando su Amazon Redshift per data warehousing. Si richiede Python, SQL, Airflow, AWS Lambda e GitHub, con attenzione a data quality e soluzioni scalabili.

Costituisce plus DuckDB o Spark; lavoro ibrido in Milano. L’offerta è rivolta a entrambi i sessi.

Qualifications

• Conoscenza di Python e SQL per sviluppo ETL e test.
• Esperienza con orchestrazione dati (Airflow) e funzioni serverless (Lambda).
• Competenze su AWS (Batch, Fargate, Redshift) e data warehousing.
• Uso di GitHub e workflow per CI/CD.
• Conoscenza di Iceberg o formato open table e CloudFormation.

Responsibilities

• Sviluppare e mantenere pipeline ETL con Airflow e AWS Lambda.
• Gestire elaborazioni batch con AWS Batch e Fargate.
• Lavorare con Amazon Redshift per data warehousing.
• Implementare data quality checks; collaborare su soluzioni scalabili.
• Lavorare in team in ambiente ibrido a Milano.

Tools

Python

SQL

Airflow

AWS Lambda

AWS Batch

Fargate

Amazon Redshift

GitHub

Iceberg

CloudFormation

GitHub Actions

Job description

Il ruolo Cerchiamo un Junior Data Engineer- DevOps engineer per un allocazione in un ambiente moderno e collaborativo. Lavorerai su progetti di data engineering con focus su architetture cloud e pipeline ETL.

Cosa farai

• Sviluppare e mantenere pipeline ETL utilizzando Airflow e AWS Lambda
• Gestire elaborazioni batch con AWS Batch e Fargate
• Lavorare con Amazon Redshift per data warehousing
• Implementare data quality checks con Great Expectations
• Collaborare con il team su soluzioni di data engineering scalabili

Requisiti

• Python, incluso testing
• SQL
• Airflow
• AWS Lambda
• AWS Batch e Fargate
• Amazon Redshift
• GitHub
• Apache Iceberg o equivalente formato open table
• CloudFormation;
• GitHub Actions e workflow.

Costituiscono un plus

• Conoscenza di DuckDB
• Conoscenza di Spark

Modalità di lavoro

Ibrida su Milano

Ai sensi della normativa vigente l’offerta è rivolta ad entrambi i sessi (DL 903/77).