Data Engineer

SmartRecruiters, Inc.; Maassluis; On-site; EUR 56,000 - 80,000; Full time

Benefits offered by this job

8 weken vakantie

Lely Academy trainingen

Moderne campusfaciliteiten

Gratis shuttlebus

Bedrijfsrestaurant

Job summary

Lely zoekt een Data Engineer voor het DWHM-team die data uit diverse bronnen betrouwbaar en schaalbaar beschikbaar maakt voor analytics. Je werkt aan het lakehouse-platform in Databricks en combineert software engineering met cloudtechnologie en operationeel eigenaarschap.

Je ontwikkelt onderhoudbare data-ingestieoplossingen, integreert nieuwe databronnen en bewaakt productiebetrouwbaarheid. Ervaring met Delta Lake, CDC en SCD Type 2 is gewenst.

Qualifications

• Minimaal 5 jaar relevante werkervaring in data engineering of vergelijkbare rol
• Sterke Python-ontwikkelingsvaardigheden en OO-programmeren
• Sterke SQL-vaardigheden voor data-extractie, transformatie en validatie
• Ervaring met Databricks en datawarehousing-patronen
• Kennis van cloudtechnologieën, bij voorkeur Azure
• Ervaring met CI/CD en version-control tooling

Responsibilities

• Bouwt, onderhoudt en optimaliseert data-ingestieprocessen voor diverse databronnen met Python in Databricks
• Ontwerpt en implementeert datawarehouse- en Delta Lake-patronen (CDC, SCD Type 2, incremental loading, deduplicatie)
• Beheert Databricks-componenten (Workflows, Unity Catalog, Compute Clusters) en Infrastructure as Code (Terraform/OpenTofu)
• Onderzoekt nieuwe bronnen en integratietypen en levert PoCs voor uitbreiding van het dataplatform
• Verantwoordelijk voor betrouwbaarheid van productie omgevingen door monitoring en incidentanalyse
• Voert design reviews, code reviews, unit- en integratietesten uit en vermindert technische schuld
• Draagt bij aan agile werkwijze zoals backlog refinement en risicobeheer

Skills

Python

SQL

Azure

CI/CD

Monitoring

Tools

Databricks

Delta Lake

Unity Catalog

Workflows

Terraform/OpenTofu

GitLab

Job description

Wij geloven in een duurzame, winstgevende en plezierige toekomst voor melkveehouders, gerealiseerd door de combinatie van robotica, technische expertise en kennis van de melkveehouderij.

Deze visie ontstond meer dan 75 jaar geleden vanuit de droom van twee broers in Maassluis. Sindsdien zijn wij uitgegroeid tot een innovatieve marktleider in geautomatiseerde systemen voor melkveehouders over de hele wereld. Met 2.500 gespecialiseerde professionals werken wij continu aan nieuwe revoluties in de landbouw.

Nog steeds opereren wij vanuit onze Campus in Maassluis, het gebouw met de hoogst haalbare duurzaamheidsprestatie van Nederland, terwijl wij wereldwijd actief zijn. Ons doel is om de melkveehouderij ook voor toekomstige generaties aantrekkelijk te maken.

Functieomschrijving

Data vormt de basis van steeds meer innovaties binnen Lely. Als Data Engineer zorg jij ervoor dat data uit uiteenlopende bronnen betrouwbaar, schaalbaar en beschikbaar wordt gemaakt voor de teams die ermee werken. Je bouwt niet alleen data-oplossingen, maar creëert een fundament waarop collega's dagelijks kunnen vertrouwen.

Het betreft een rol in het Data Warehouse Management (DWHM) team van de Data & BI afdeling bestaande uit Data Engineers en Analytics Engineers. Het team is verantwoordelijk voor creëren van fundamentele dataproducten bedoeld voor analytics en business reporting. In rol als Data Engineers, werk je aan de verdere ontwikkeling van het centrale dataplatform van Lely en zorgt ervoor dat data vanuit diverse bronnen betrouwbaar en schaalbaar beschikbaar komt voor de organisatie. Daarbij combineer je software engineering, cloudtechnologie en operationeel eigenaarschap.

In deze rol werk je aan het hart van ons moderne lakehouse-platform in Databricks. Je ontwikkelt onderhoudbare en testbare oplossingen, automatiseert processen en zorgt ervoor dat data beschikbaar is wanneer de business deze nodig heeft. Van het ontwerpen van betrouwbare data-ingestieoplossingen en het integreren van nieuwe databronnen tot het oplossen van productie-incidenten: jij bent betrokken bij de volledige levenscyclus van data-oplossingen.

Wat zijn jouw verantwoordelijkheden?

Nog naast het werk met collega's uit het DWHM team, werk je samen met collega's uit het BI-team en Data Governance team aan een betrouwbaar en schaalbaar dataplatform waarop de organisatie dagelijks vertrouwt. Je beweegt je tussen software engineering, platformbeheer en operations, waarbij je niet alleen bouwt, maar ook verantwoordelijkheid neemt voor kwaliteit, prestaties en continuïteit.

• Je bouwt, onderhoudt en optimaliseert data-ingestieprocessen voor uiteenlopende databronnen met objectgeoriënteerde Python in Databricks.
• Je ontwerpt en implementeert betrouwbare datawarehouse- en Delta Lake-patronen zoals CDC, SCD Type 2, incremental loading en deduplicatie.
• Je beheert en configureert Databricks-componenten, waaronder Workflows, Unity Catalog en Compute Clusters, en onderhoudt Infrastructure as Code met Databricks Asset Bundles en OpenTofu/Terraform.
• Je onderzoekt nieuwe bron- en integratietypen, voert proof-of-concepts uit en draagt bij aan de verdere ontwikkeling van het dataplatform.
• Je neemt eigenaarschap over de betrouwbaarheid van productieomgevingen door monitoring, incidentanalyse, root-cause analyses en kostenbewaking.
• Je borgt kwaliteit door design reviews, code reviews, unit- en integratietesten, het aanpakken van technische schuld en het continu verbeteren van engineeringprocessen binnen een agile werkomgeving.
• Je draagt actief bij aan de agile werkwijze door backlog refinement, inschattingen en risicobeheering.

ouwen van onderhoudbare systemen, denkt na over kwaliteit en betrouwbaarheid en vindt het leuk om samen met collega's complexe datavraagstukken op te lossen. Daarnaast beschik je over minimaal 5 jaar relevante werkervaring als Data Engineer of in een vergelijkbare rol binnen data- en cloudomgevingen.

Daarnaast breng je het volgende mee:

Sterke Python-engineeringvaardigheden met ervaring in objectgeoriënteerd programmeren, modulaire architecturen en testbare code.

Sterke SQL-vaardigheden voor data-extractie, transformatie en validatie binnen data-ingestieprocessen.

Ervaring met het ontsluiten van data uit verschillende bronnen, waaronder API's, SQL-databases en file-based bronnen zoals FTP/SFTP.

Hands-on ervaring met Databricks, waaronder Workflows, Spark, Delta Lake en Unity Catalog.

Kennis van Delta Lake- en datawarehouse-patronen zoals CDC, SCD Type 2, incremental loading en deduplicatie.

Ervaring met unit testing en integratietesten om robuuste en betrouwbare oplossingen te realiseren.

Ervaring met CI/CD-processen en tooling zoals GitLab.

Kennis van cloudtechnologieën, bij voorkeur binnen het Azure-ecosysteem.

Ervaring met monitoring, incident debugging en het waarborgen van betrouwbare productieomgevingen.

Een pragmatische houding ten opzichte van AI-ondersteunde softwareontwikkeling en engineering.

Herken je jezelf niet in alle punten, maar spreekt de functie je wel aan? Dan nodigen we je nadrukkelijk uit om toch te solliciteren. We geloven dat verschillende achtergronden, perspectieven en ervaringen bijdragen aan betere oplossingen.

Voor deze functie is een pre-employment screening van toepassing, bestaande uit een Verklaring Omtrent het Gedrag (VOG) en een achtergrond-/integriteitsonderzoek. Omdat je toegang krijgt tot gevoelige bedrijfs- en klantinformatie, hechten wij veel waarde aan een zorgvuldige screening. Deze screening moet met succes zijn afgerond voordat je bij ons in dienst kunt treden.Wij vergoeden de kosten van de VOG-aanvraag en gaan zorgvuldig om met jouw persoonsgegevens, conform onze privacyverklaring.

Aanvullende informatie

Werken bij Lely betekent bijdragen aan duurzame vooruitgang binnen een van de meest innovatieve organisaties van Nederland. Je speelt een belangrijke rol in het toekomstbestendig maken van de agrarische sector, en wij zorgen ervoor dat je alle ruimte, middelen en ondersteuning krijgt om dat te doen.

• Een internationale werkomgeving met veel ruimte voor initiatief en ondernemerschap.
• Uitstekende arbeidsvoorwaarden, waaronder tot 8 weken vakantie per jaar en een sterke pensioenregeling.
• Een salaris tussen €5.015 en € 7.163bruto per maand, met duidelijke groeimogelijkheden ten opzichte van je startsalaris.
• Uitgebreide ontwikkelingsmogelijkheden: jij hebt de regie over je eigen groei en kunt kiezen uit een breed aanbod aan trainingen via onze Lely Academy, van persoonlijke ontwikkeling tot functiegerichte opleidingen.
• Op onze moderne Lely Campus kun je dagelijks gebruikmaken van uitgebreide sportfaciliteiten, waaronder een indoor gym, outdoor padelbanen, basketbal- en volleybalvelden, tafeltennistafels en tafelvoetbal. Daarnaast kun je deelnemen aan Hyrox-trainingen of kiezen voor personal training, en je collega’s uitdagen tijdens een actieve pauze.
• Geniet van verse koffie en thee van onze eigen barista, bereid met melk van onze eigen boerderij, en van een gezond en betaalbaar bedrijfsrestaurant.
• Een gratis shuttlebus brengt je van en naar de metro in Maassluis, zodat je werkdag soepel begint en eindigt.
• Successen moeten worden gevierd: van jubilea tot kerstfeesten, bij Lely weten we hoe dat moet!
• We zijn er bovendien trots op dat onze inzet en visie zijn erkend met de Rotterdam Business Award 2025.

Wij waarderen jullie interesse, maar werven al onze kandidaten rechtstreeks. We begrijpen dat je als intermediair kandidaten voor onze vacatures wilt aandragen en daarmee wilt bijdragen aan onze ambities, maar zo is ons recruitmentproces niet ingericht. Dit betekent dat ongevraagd aangeleverde profielen voor vacatures bij Lely worden beschouwd als directe sollicitaties.