Data Engineer: Byg missionkritisk dataplatform

Politi; København; On-site; DKK 550,000 - 850,000; Full time

Benefits offered by this job

Informelt arbejdsmiljø

Job summary

PET søger en engageret data engineer til at udvikle og vedligeholde en central dataplatf orm, der understøtter operative analytikere i PET. Du bliver fast kontakt mellem indhentning og analyse og arbejder tæt sammen med softwareudviklere og forretningsejere i Center for Applikationer.

Du bidrager til at samle data fra tværs af kilder og forbedre datakvalitet og governance. Vi tilbyder et uformelt arbejdsmiljø med plads til indflydelse og udvikling.

Qualifications

• Relevant IT-uddannelse eller tilsvarende erfaring inden for dataudtræk og dataplatforme.
• Erfaring med ETL-pipelines og dataindsamling, transformation og lagring.
• Gode færdigheder i databaser og datamodellering.
• Erfaring med datavarehuse og datalakes, herunder objektlagring.
• Erfaring med Python og Java, og med køersystemer som Kafka/RabbitMQ.
• Erfaring med containerisering og orkestrering (Docker/Kubernetes).
• Arbejdsgiverforståelse af data governance og datakvalitet.
• Evne til fejlfinding i eksisterende datainfrastruktur.

Responsibilities

• Designe og vedligeholde ETL-pipelines til indsamling og transformation af data.
• Udvikle datamodeller og datastrukturer til analyseformål.
• Implementere og optimere dataplatformen til operative analytikere.
• Samarbejde med softwareudviklere og forretningsejere i PET.
• Bidrage til data governance og datakvalitet.
• Fejlfinde og løse problemer i infrastrukturen og sørge for robusthed.

Skills

ETL-pipelines

Apache Spark

Apache Airflow

Apache NiFi

Datamodeller

Datastrukturer

PostgreSQL/MySQL

OpenSearch

Data warehouses

Data lakes

Python

Java

Kafka

RabbitMQ

Docker

Kubernetes

Data governance

Datakvalitet

Fejlfinding

Education

Datalogi eller tilsvarende uddannelse

Autodidakt med IT-erfaring

Tools

Docker

Kubernetes

OpenSearch

Apache Spark

Apache Airflow

Apache NiFi

PostgreSQL/MySQL

Open source ETL tools

Job description

PET søger en engageret data engineer til at udvikle og vedligeholde en central dataplatf orm, der understøtter operative analytikere i PET. Du bliver fast kontakt mellem indhentning og analyse og arbejder tæt sammen med softwareudviklere og forretningsejere i Center for Applikationer.

Du bidrager til at samle data fra tværs af kilder og forbedre datakvalitet og governance. Vi tilbyder et uformelt arbejdsmiljø med plads til indflydelse og udvikling.