Data Platform Engineer – Open Source & Data Pipelines

Knowit; Københavns Kommune; On-site; DKK 700,000 - 900,000; Full time

Job summary

Knowit søger en Data Platform Engineer til at arbejde tæt på data, platform og kunder i København. Du vil bidrage til opbygning af open source dataplatforme, der virker i praksis, ikke kun på arkitekturtegninger.

Du bliver en del af et team med erfarne senior-profiler, arkitekter og infrastrukturfolk og kommer til at arbejde med moderne teknologier i spændingsfeltet mellem data og platform engineering.

Qualifications

• 3–5 års erfaring som Data Engineer, Data Platform Engineer, Software Developer eller lignende
• Solid hands-on erfaring med data pipelines og dataplatforme
• Erfaring med open source data-platforme og cloud-infrastruktur
• God kommunikation på dansk og engelsk i kunderelaterede sammenhænge

Responsibilities

• Udvikling og drift af data pipelines til batch, streaming og CDC
• Opsætning og videreudvikling af processing- og orchestration-lag
• Deployment, fejlsøgning og drift af services på container-/compute-platforme
• Arbejde med Git, CI/CD, YAML og automatisering
• Registrering af datasæt, lineage og data quality checks
• Dialog med domænebrugere og tekniske interessenter om dataflows og løsninger

Skills

Python

SQL

Kommunikation (Danish & English)

Tools

Spark

Polars

Delta Lake

Iceberg

Hudi

Dagster

Prefect

Airflow

Kafka

Debezium

Airbyte

NiFi

Trino

Presto

DuckDB

Kubernetes

Docker

Linux

Datadog

Prometheus

Grafana

Git

CI/CD

YAML

Job description

Knowit søger en Data Platform Engineer til at arbejde tæt på data, platform og kunder i København. Du vil bidrage til opbygning af open source dataplatforme, der virker i praksis, ikke kun på arkitekturtegninger.

Du bliver en del af et team med erfarne senior-profiler, arkitekter og infrastrukturfolk og kommer til at arbejde med moderne teknologier i spændingsfeltet mellem data og platform engineering.