AI Engineer: Scale GenAI & Databricks for Public Data

Vandijkwerkt; Noord-Brabant; Hybrid; EUR 70,000 - 100,000; Part time

Job summary

Van Dijk zoekt een data engineer met ruime ervaring in Databricks en Azure Foundry om een schaalbaar AI-platform te bouwen dat vergunningdata analyseert. Je werkt aan GenAI-workflows, prompt-engineering en CI/CD-implementaties in een hybride werkomgeving.

Je combineert Python-ontwikkeling met data pipelines en documentverwerking, en onderhoudt Azure-architectuur en security, terwijl je samenwerkt met domeinexperts aan publieke projecten zoals AI Vergunningen.

Qualifications

• Minimaal 4 jaar ervaring in Data Engineering of vergelijkbare data-gerelateerde softwareontwikkeling.
• Minimaal 2 jaar ervaring met Generative AI / LLM-oplossingen.
• HBO- of WO-werk- en denkniveau (bèta/technisch profiel).
• Uitstekende kennis van Python, inclusief software design patterns en coding standards.
• Prompt engineering en dataprocessing ervaring.
• Data Engineering binnen Databricks.
• Entity extraction en documentverwerking binnen Azure AI Foundry.
• Ervaring met Docker en Azure Container Apps.
• Kennis van FastAPI.
• Kennis van Azure Networking en Security.

Responsibilities

• Je ontwikkelt en optimaliseert GenAI-oplossingen op Microsoft Azure.
• Je ontwerpt en bouwt productieklare AI-workflows en implementeert prompt-engineeringstrategieën voor betrouwbare resultaten.
• Je verwerkt en extraheert informatie uit vergunningdocumenten en verbetert de kwaliteit, nauwkeurigheid en reproduceerbaarheid van de AI-uitkomsten.
• Je ontwikkelt Databricks-datapipelines voor het verwerken, transformeren en verrijken van vergunningdata.
• Je ontsluit en bereidt grote hoeveelheden documentdata binnen Databricks voor op AI- en LLM-toepassingen.
• Je bouwt schaalbare backend-oplossingen in Python en zet CI/CD-processen op en onderhoudt deze.
• Je werkt samen met functionele experts en interne medewerkers, deelt actief kennis en denkt mee over Azure-architectuur, security en beheer.

Skills

Python

Databricks

Azure Foundry

Docker

FastAPI

CI/CD

Prompt engineering

GenAI/LLM

Entity extraction

Document processing

Education

HBO/WO technische opleiding

Tools

Databricks

Azure Container Apps

Azure AI Foundry

CI/CD tooling

Job description

Van Dijk zoekt een data engineer met ruime ervaring in Databricks en Azure Foundry om een schaalbaar AI-platform te bouwen dat vergunningdata analyseert. Je werkt aan GenAI-workflows, prompt-engineering en CI/CD-implementaties in een hybride werkomgeving.

Je combineert Python-ontwikkeling met data pipelines en documentverwerking, en onderhoudt Azure-architectuur en security, terwijl je samenwerkt met domeinexperts aan publieke projecten zoals AI Vergunningen.