Freelance Senior MLOps Engineer - Databricks & Python

EngiFlex; Melle; Sur place; EUR 55 000 - 83 000; Temps partiel

Résumé du poste

EngiFlex zoekt een specialist om een afgebakend project rond datacleaning en anomaliedetectie te onderzoeken voor data uit Digitale Cabines in een bestaand dataplatform.

Je ontwikkelt mee een Databricks-wheel-achtige oplossing die bij het laden van datasets issues detecteert en oorzaken achterhaalt, waarna de verwerkte data volgens een vaste structuur wordt weggeschreven.

Qualifications

• Ervaring met Azure Databricks engineering.
• Expertise in data-ingestie en data quality cleaning.
• Ervaring met root-causeanalyse van data-qualityproblemen.
• Combinatie van Data Science en MLOps in systemen met tijdreeksen.
• Sterke Python-vaardigheden en Python-softwareontwikkeling.
• Ervaring met deployen van Python als wheel in Databricks.
• Kennis van security en dataregulaties in Europese context.
• Masterdiploma en onmiddellijke beschikbaarheid.

Responsabilités

• Onderzoeken hoe structurele datacleaning en anomaliedetectie opgezet kan worden voor data uit Digitale Cabines binnen een bestaand dataplatform.
• Meewerken aan de ontwikkeling van een Databricks-wheel-achtige oplossing die data-issues detecteert en trappedoorzaken achterhaalt.
• Samenwerken in een klein team en de code bouwen, testen en leveren zodat het binnen het dataplatform deployable is.
• Afstemmen met platform- en dataspecialisten ter validatie van werking en stabiliteit.

Description du poste

Taken en verantwoordelijkheden

Voor een afgebakend onderzoeksproject zoeken we een specialist die mee onderzoekt hoe structurele datacleaning en anomaliedetectie kunnen worden opgezet voor data uit Digitale Cabines binnen een bestaand dataplatform.

Je ontwikkelt mee een algoritme dat als Databricks Wheel kan worden geïmplementeerd. Dit component moet bij het opladen van datasets problemen in de aangeleverde data detecteren, de oorzaak ervan helpen identificeren en de verwerkte data volgens een vaste structuur wegschrijven.

Je werkt samen in een team van twee gespecialiseerde profielen en bouwt, test en levert de code op in een vorm die binnen het dataplatform kan worden gedeployed. Daarbij stem je af met platform- en dataspecialisten om de inhoudelijke werking en stabiliteit van de oplossing te valideren.

De focus van deze opdracht ligt op het aantonen van de haalbaarheid en goede werking van de aanpak via een stabiel en coherent algoritme. Structurele uitrol van de algoritmes en het verdere beheer van de platformen vallen buiten de scope van deze rol.

Jouw profiel

• Je hebt aantoonbare ervaring met Azure Databricks engineering.
• Je hebt expertise in data-ingestie, data quality cleaning en root-causeanalyse van data-qualityproblemen.
• Je combineert ervaring in Data Science en MLOps met kennis van tijdsreeksen afkomstig van elektriciteitsnetten.
• Je hebt sterke ervaring met de gevraagde technologie of met een gelijkwaardige technologie.
• Je beschikt over doorgedreven ervaring in Python software engineering of een equivalente taal, met een duidelijke focus op data-analyse.
• Je hebt ervaring met het deployen van Python as a Wheel in Databricks, conform Europese regels rond data.
• Je hebt ervaring met Python softwareontwikkeling in een data-gedreven context.
• Je bent vertrouwd met de verwerking en analyse van substation-meetdata in een klantenbeheerde secure cloudomgeving.
• Je beschikt minstens over een masterdiploma.
• Je bent onmiddellijk beschikbaar.
• Je werkt vlot samen met andere specialisten in een technische projectomgeving.

Deze functie wordt aangeboden als een deeltijdse freelance rol (40%).