Data Engineer DataBricks

LGA IT; Roeselare; On-site; EUR 55,000 - 90,000; Full time

Job summary

LGA IT zoekt een Data Engineer die het voortouw neemt in het ontwerpen en onderhouden van het centrale datawarehouse. Je werkt in een moderne Databricks-omgeving en zorgt voor efficiënte opslag van data.

Je bouwt betrouwbare ETL/ELT-processen met Python en SQL om nieuwe databronnen te ontsluiten, automatiseringen te realiseren en de datakwaliteit te waarborgen. Je ontwerpt robuuste datamodellen, voert geautomatiseerde tests uit en bewaakt prestaties via dbt-tests en dashboards.

Qualifications

• Vaardigheden in het opzetten en onderhouden van een centraal datawarehouse in een moderne omgeving.
• Sterke Python- en SQL-vaardigheden voor ETL/ELT-processen.
• Ervaring met het ontwerpen van datamodellen en automatiseren van testen voor datakwaliteit.
• Kennis van dbt-tests en het ontwikkelen van overzichtelijke dashboards.

Responsibilities

• Neem het voortouw bij het uittekenen en onderhouden van het centrale datawarehouse in Databricks.
• Bouw betrouwbare ETL/ELT-processen met Python en SQL om nieuwe databronnen vlot te ontsluiten en workflows te automatiseren.
• Ontwerp robuuste datamodellen en implementeer geautomatiseerde testen om de datakwaliteit te waarborgen.
• Bewak performance via dbt-tests en dashboards en los incidenten proactief op.
• Ondersteun collega’s met heldere PowerBI-datasets voor betere beslissingen.

Skills

Python

SQL

Databricks

dbt

PowerBI

Data modeling

ETL/ELT

Data quality

Tools

Databricks

dbt

PowerBI

Job description

In deze rol als Data Engineer neem jij het voortouw bij het uittekenen en onderhouden van ons centrale datawarehouse.

• Je beheert en perfectioneert ons datawarehouse in een moderne Databricks-omgeving zodat alle data centraal en efficiënt opgeslagen wordt.
• Hierbij bouw je betrouwbare ETL/ELT-processen met Python en SQL om nieuwe databronnen vlot te ontsluiten en workflows te automatiseren.
• Daarnaast ontwerp je robuuste datamodellen en implementeer je geautomatiseerde testen waardoor de datakwaliteit binnen het bedrijf onomstreden blijft.
• Via gerichte dbt-tests en overzichtelijke dashboards bewaak je de algemene performance om eventuele incidenten proactief op te lossen.
• Tot slot sla je de brug tussen techniek en business door collega’s te ondersteunen met heldere PowerBI datasets voor slimme beslissingen.