Data Engineer — Azure Data Lake, Databricks & PySpark

Q-logic; Breda; On-site; EUR 65,000 - 90,000; Full time

Job summary

Q Logic B.V. in Breda zoekt een Data Engineer die het datafundament verder ontwikkeld en beheert, zodat operationele processen en rapportages betrouwbaar ondersteund worden. De functie richt zich op schaalbare dataoplossingen voor groei naar België.

Je bouwt datapipelines met Databricks, PySpark en SQL, werkt aan Azure Data Lake en de Bronze-, Silver- en Gold-lagen. Je borgt datakwaliteit door monitoring en automatisering en ondersteunt toekomstige AI-toepassingen.

Qualifications

• HBO/WO werk...

Responsibilities

• Datapipelines ontwikkelen en optimaliseren in Databricks ;
• Werken met PySpark, SQL en Azure Data Lake ;
• ETL- en ELT-processen ontwikkelen en automatiseren, inclusief orchestration van datastromen, o.a. via API koppelingen;
• Het Azure-dataplatform verder ontwikkelen , waaronder Azure Data Lake en de Bronze-, Silver- en Gold-lagen.
• Datakwaliteit en betrouwbaarheid borgen door monitoring, logging, controles en structurele optimalisaties.
• Meebouwen aan een schaalbaar datafundament voor BI, operationele processen en toekomstige AI-toepassingen.

Job description

Q Logic B.V. in Breda zoekt een Data Engineer die het datafundament verder ontwikkeld en beheert, zodat operationele processen en rapportages betrouwbaar ondersteund worden. De functie richt zich op schaalbare dataoplossingen voor groei naar België.

Je bouwt datapipelines met Databricks, PySpark en SQL, werkt aan Azure Data Lake en de Bronze-, Silver- en Gold-lagen. Je borgt datakwaliteit door monitoring en automatisering en ondersteunt toekomstige AI-toepassingen.