Azure Data Engineer: Build Scalable Pipelines in Scrum

Pearson & Partners; Eindhoven; Vor Ort; EUR 60.000 - 90.000; Vollzeit

Benefits dieser Stelle

Vast dienstverband

Uiteenlopende dataplatforms bij olikae

Een scrumteam met korte ontwikkelcycli

Zusammenfassung

Pearson & Partners werft voor een opdrachtgever in Eindhoven een Azure Data Engineer in vaste dienst. Je bouwt in een scrumteam aan datapipelines en dataplatforms voor verschillende opdrachtgevers met stack Azure, Python, Spark, Airflow, Docker en Kubernetes.

Je verantwoordelijkheden omvatten schaalbare pipelines, herbruikbare bouwstenen, orkestratie en deployment met Airflow, Docker en Kubernetes, plus CI/CD en testen voor de pipelines die je bouwt.

Qualifikationen

• Enkele jaren ervaring als data engineer of in een vergelijkbare rol.
• Python, Spark en Azure.
• Docker en Kubernetes.
• Affiniteit met CI/CD en geautomatiseerd testen.

Aufgaben

• Schaalbare datapipelines bouwen met Azure, Python en Spark.
• Dataplatforms opzetten uit herbruikbare bouwstenen.
• Orkestratie en deployment met Airflow, Docker en Kubernetes.
• CI/CD en tests inrichten voor de pipelines die je bouwt.

Kenntnisse

Python

Spark

Azure

CI/CD

Automated testing

Data engineering

Tools

Airflow

Docker

Kubernetes

Jobbeschreibung

Pearson & Partners werft voor een opdrachtgever in Eindhoven een Azure Data Engineer in vaste dienst. Je bouwt in een scrumteam aan datapipelines en dataplatforms voor verschillende opdrachtgevers met stack Azure, Python, Spark, Airflow, Docker en Kubernetes.

Je verantwoordelijkheden omvatten schaalbare pipelines, herbruikbare bouwstenen, orkestratie en deployment met Airflow, Docker en Kubernetes, plus CI/CD en testen voor de pipelines die je bouwt.