Databricks Engineer

Data Tribes Inc.; Amsterdam; On-site; EUR 70,000 - 100,000; Full time

Benefits offered by this job

Hybride werkopties

Laptop/ telefoonvergoeding

25 vakantiedagen per jaar

Mobiliteitsbudget & internetvergoeding

Job summary

Data Tribes zoekt een Databricks Engineer die moderne dataplatforms bouwt en beheert. Je werkt aan schaalbare pipelines, dataflows en governance binnen Databricks, met PySpark, SQL en Delta Lake.

Je denkt mee over architectuur, modellering en CI/CD en werkt met cloud omgevingen als Azure/AWS/GCP. Je werkt samen met Data Engineers, Data Scientists en BI-experts, en je haalt waarde uit data voor analytics en AI-toepassingen using tools zoals Power BI.

Qualifications

• Hbo- of wo-werk- en denkniveau vereist.
• Hands-on ervaring met Databricks en data pipelines.
• Kennis van datamodellering en governance is een plus.

Responsibilities

• Ontwerpen, ontwikkelen en beheren van schaalbare data pipelines en dataflows binnen Databricks.
• Verwerken, transformeren en opschonen van data met Python/PySpark en SQL.
• Werken met Delta Lake en Lakehouse-architecturen.
• Ontwikkelen van datamodellen afgestemd op informatieve behoeften.
• Plannen, automatiseren en monitoren van workloads met Databricks Workflows.
• Toepassen van CI/CD en software-engineering principes binnen data engineering.
• Ontwikkelen en beheren van ingest-functionaliteiten voor diverse databronnen.
• Werken aan data quality, security en governance (Unity Catalog).
• Databronnen ontsluiten richting analytics, AI en tools zoals Power BI en Delta Sharing.
• Samenwerken met Data Engineers, Data Scientists, BI-specialisten, architects en stakeholders.
• Meedenken over architectuur en standaarden voor het dataplatform.

Skills

Python

PySpark

SQL

Databricks

Delta Lake

Unity Catalog

Databricks Workflows

Azure

AWS

Google Cloud

dbt

Azure Data Factory

Docker

Kubernetes

CI/CD

Education

Hbo- of wo-werk- en denkniveau

Tools

Azure

AWS

Google Cloud

Job description

Ben je klaar om de mouwen op te stropen en de groene ridder in je los te laten? Kom bij onze Tribe en geef samen met ons die blauwe kikker het groene randje waar ze zo naar snakt!

Hoe we werken en wat we belangrijk vinden

Bij Data Tribes draait het om saamhorigheid, nieuwsgierigheid, plezier en samen groeien. Je bent bij ons niet alleen je functietitel, diploma of aantal jaren ervaring. We kijken vooral naar wat je kunt, wat je wilt leren en waar je naartoe wilt.

Leren doe je bij ons vooral door te doen. Door nieuwe technologie uit te proberen, kennis te delen en soms gewoon iets te bouwen om te ontdekken of het werkt. We geven je de ruimte om jezelf te ontwikkelen en verantwoordelijkheid te nemen voor je eigen groei.

En ja, je mag je bij ons net zo thuis voelen als in je favoriete hoodie. We houden van mensen met een mening en van inhoudelijke discussies die soms best stevig mogen zijn, zolang nieuwsgierigheid en respect altijd vooropstaan. Juist wanneer verschillende ideeën botsen, ontstaan vaak de beste oplossingen.Data & AI is ons speelveld

Van moderne dataplatforms en analytics tot Machine Learning, Generative AI en automation: we helpen organisaties om data om te zetten in betere beslissingen en concrete resultaten. Daarbij werken we niet vóór onze klanten, maar zoveel mogelijk mét onze klanten.

We zijn nieuwsgierig naar wat vandaag kan en misschien nog nieuwsgieriger naar wat morgen mogelijk wordt. Dus experimenteer, stel vragen, deel wat je weet en daag ons vooral uit als je denkt dat iets beter kan.Klinkt dat als jouw tribe? Dan willen we je leren kennen.

Over de rol

Wat het betekent om als Databricks Engineer bij Data Tribes aan de slag te gaan?

Als Databricks Engineer bij Data Tribes bouw je aan moderne dataplatforms die organisaties helpen om data betrouwbaar, schaalbaar en veilig beschikbaar te maken voor analytics, reporting en AI.

Dat betekent veel meer dan alleen pipelines bouwen. Je denkt mee over architectuur, datamodellering, integratie en governance en vertaalt business vraagstukken naar oplossingen die technisch robuust én praktisch bruikbaar zijn.

Databricks vormt de kern van je werk. Je werkt met onder andere Python/PySpark, SQL, Delta Lake, Unity Catalog en Databricks Workflows. Afhankelijk van het project combineer je dit met Azure, AWS of Google Cloud en technologieën als dbt, Azure Data Factory, Docker, Kubernetes en CI/CD.

We werken daarbij niet vanuit een vaste technische blauwdruk. Eerst begrijpen we de organisatie, de processen, de data en vooral de vraag die opgelost moet worden. Daarna bepalen we welke architectuur en technologie daar het beste bij passen.

Jouw werkzaamheden:

• Ontwerpen, ontwikkelen en beheren van schaalbare data pipelines en dataflows binnen Databricks

• verwerken, transformeren en opschonen van data met Python/PySpark en SQL

• werken met Delta Lake en moderne Lakehouse-architecturen

• ontwikkelen en toepassen van datamodellen die aansluiten op de informatiebehoefte van de organisatie

• plannen, automatiseren en monitoren van workloads met Databricks Workflows

• toepassen van CI/CD en software-engineering principes binnen data engineering

• ontwikkelen en beheren van ingest-functionaliteiten voor verschillende databronnen

• werken aan data quality, security en governance, onder andere met Unity Catalog

• ontsluiten van data richting analytics, AI en toepassingen zoals Power BI en Delta Sharing

• samenwerken met Data Engineers, Data Scientists, BI-specialisten, architecten en stakeholders

• meedenken over architectuur keuzes, standaarden en de verdere ontwikkeling van het dataplatform.

Ben jij dit?

We zoeken een Data Engineer die verder kijkt dan de techniek alleen. Iemand die zelfstandig kan bouwen, maar ook wil begrijpen waarom iets gebouwd wordt en hoe data uiteindelijk binnen een organisatie wordt gebruikt.

Complexe vraagstukken waarin nog niet alles is uitgedacht, zie je niet als probleem maar als interessant vertrekpunt. Voor jou begint een goede oplossing met het begrijpen van de taal van de business: begrippen, processen, informatiebehoeften en requirements. Vanuit daar vertaal je de vraag naar een logisch datamodel en een schaalbare technische oplossing.

Je wilt jezelf verder ontwikkelen binnen het Databricks-ecosysteem en hebt de ambitie om door te groeien richting Senior Data Engineer, Data Platform Engineer of Data Architect.

Daarmee sluit je mooi aan bij een principe dat we binnen Data Tribes belangrijk vinden: \"Language first. Technology will follow.\"

Je deelt…

• Onze overtuiging dat data en technologie pas waarde krijgen als ze daadwerkelijk worden gebruikt

• Onze nieuwsgierigheid naar nieuwe technologie en wat daarmee mogelijk wordt

• De overtuiging dat goede techniek begint bij taal, context en begrip

• De drive om kennis te delen en samen steeds beter te worden

Je hebt…

• Hbo- of wo-werk- en denkniveau

• minimaal 2 jaar relevante ervaring als Data Engineer

• Uitstekende beheersing van de Nederlandse taal, zowel mondeling als schriftelijk

• hands-on ervaring met Databricks en het ontwikkelen van data pipelines

• ervaring met Python/PySpark en SQL

• kennis van CI/CD en software-engineeringprincipes;

• ervaring met of interesse in Delta Lake, Unity Catalog en Lakehouse-architecturen

• gevoel voor datamodellering, data quality en data governance

• sterk analytisch vermogen en de nieuwsgierigheid om te begrijpen wat er achter een technische vraag zit

Wat we bieden

• Ruimte om te leren en te groeien via trainingen en cursussen

• Marktconform salaris met uitgebreide arbeidsvoorwaarden

• Mobiliteitsbudget en maandelijkse internetvergoeding

• Hybride werkopties

• Laptop en telefoonvergoeding

• 25 vakantiedagen per jaar