Senior Data Engineer – Dataplattform till SJ

SJ AB; Stockholms kommun; On-site; SEK 750,000 - 1,100,000; Full time

Job summary

SJ AB moderniserar sin digitala landskap och bygger en ny dataplattform på Databricks i Azure. I Data Foundry-teamet utvecklar vi plattformens kärnkapaciteter och publicerar dataprodukter som andra team enkelt kan använda.

Som Senior Data Engineer kombinerar du plattformstänk med praktisk data engineering: bygga datapipelines, definiera golden paths, införa governance och stödja GDPR-krav. Du samarbetar med utvecklare, analytiker och plattformsteam för att lösa verkliga problem i hela

Qualifications

• God erfarenhet av Python och SQL.
• Molnmiljö, exempelvis Azure.
• Erfarenhet av dbt eller liknande transformationsverktyg.
• Git-baserade arbetsfl"oden och utvecklarverktyg.
• Data mesh eller dataprodukt-tänk.

Responsibilities

• Bygga datapipelines och dataprodukter.
• Utveckla pipelines och transformationsverktyg i Databricks och dbt.
• Modellera data och leverera dataprodukter som används av andra team.
• Definiera “golden paths” för data engineering.
• Ta fram standardiserade sätt att bygga och publicera dataprodukter – mallar och dokumentation.
• Bygga in governance i plattformen och följa GDPR-krav.

Skills

Python

SQL

Azure

Data mesh

Dataprodukt-tänk

Tools

dbt

Git

Job description

Var med och bygg grunden för SJ:s dataplattform!

SJ moderniserar just nu sitt digitala landskap och data är en central del av den resan. Vi bygger en modern dataplattform på Databricks i Azure, inspirerad av data mesh-principer, där team enkelt ska kunna publicera, upptäcka och använda data som dataprodukter.

Vårt team, Data Foundry, arbetar i gränslandet mellan plattform och verkliga dataprojekt. Vi utvecklar själva plattformsförmågorna – katalog, governance, pipelines och utvecklarverktyg – samtidigt som vi arbetar praktiskt med riktiga datakällor och affärsbehov. Det gör att vi kan testa idéer snabbt, hitta rätt tekniska mönster och bygga en plattform som möter behoven. Nu söker vi en Senior Data Engineer som vill vara med och forma den här grunden tillsammans med oss.

Din kommande roll

Rollen kombinerar plattformstänk med praktisk data engineering. Till exempel kommer du att:

• Bygga datapipelines och dataprodukter
• Utveckla pipelines och transformationer i Databricks och dbt, modellera data och leverera dataprodukter som kan användas av andra team
• Definiera “golden paths” för data engineering
• Ta fram standardiserade sätt att bygga och publicera dataprodukter – mallar, SDK:er, verktyg och dokumentation som gör plattformen enkel att använda
• Bygga in governance i plattformen
• Utveckla lösningar för dataklassificering, anonymisering, åtkomstkontroller och andra krav kopplade till exempelvis GDPR
• Samarbeta med utvecklare, analytiker och plattformsteam för att säkerställa att plattformen och dataprodukterna löser verkliga problem och kan användas brett i organisationen.

Förväntningar på den vi söker

• Har god erfarenhet av Python och SQL
• Har arbetat i molnmiljö, exempelvis Azure
• Har erfarenhet av dbt eller liknande transformationsverktyg
• Är bekväm med Git-baserade arbetsflöden
• interna plattformar eller developer tooling
• data mesh eller dataprodukt-tänk

Varför arbeta hos oss?

På SJ är data en central del av vår digitala modernisering. Dataplattformen vi bygger kommer att bli en grundförutsättning för hur data delas och används i hela organisationen. Hos oss får du vara med tidigt i resan och påverka hur plattformen och arbetssätten formas. Du kommer att arbeta i ett erfaret team med stor teknisk frihet och möjlighet att bygga något som får verklig betydelse. Samtidigt bidrar du till något större: hållbara transporter och ett mer tillgängligt Sverige.