A complete application in a minute
Tailored resume and cover letter, ready to send.
ClickHouse sucht einen Senior Data Engineer zur Weiterentwicklung der DWH-Plattform. Sie arbeiten an der Optimierung von Transformations-Pipelines, entwickeln modulare Airflow-Komponenten, dbt-Makros und robuste Datenmodelle für unternehmensweite Data Marts.
Sie bringen exzellente SQL-Kenntnisse, Erfahrung mit Airflow, dbt und Python sowie Erfahrung im Aufbau skalierbarer Pipelines mit hohem Durchsatz mit. Vorteilhaft ist ClickHouse-Know-how und Cloud-Experience.
Bei ClickHouse sind wir überzeugt, dass Produktentscheidungen auf Daten und nicht auf Bauchgefühl beruhen sollten. Dafür haben wir ein umfassendes internes Data Warehouse aufgebaut. Mehr darüber erfährst du in unserem Blog. Es ermöglicht Analytics, Forecasting und Entscheidungen in allen Teams des Unternehmens.
Im Zentrum unseres Stacks steht ClickHouse als zentrale Speicher- und Verarbeitungs-Engine, ergänzt durch dbt, Airflow, S3, AWS, Superset und GitHub Actions. Wir nehmen Daten aus 30+ verschiedenen externen Quellen auf, verarbeiten über 2,5 PB an Daten und stellen den Geschäftsanwendern die meisten Data Marts mit einer End-to-End-Latenz von 1 Stunde bereit. Dieser Standard erfordert hochgradig optimierte und äußerst zuverlässige Transformations-Pipelines.
Wir suchen einen Senior Data Engineer, der die DWH-Plattform weiterentwickelt, ihre technischen Grenzen erweitert und zuverlässige, leistungsstarke Datenmodelle für die Geschäftsanwender im gesamten Unternehmen bereitstellt.
Entwicklung der DWH-Plattform
Entwurf und Entwicklung wiederverwendbarer Airflow-Komponenten, darunter Operatoren, Konnektoren und Hooks, sowie maßgeschneiderter Integrationen, die auf unsere Datenarchitektur zugeschnitten sind.
Entwicklung wiederverwendbarer dbt-Makros und Abstraktionen: inkrementelle Strategien, ETL-Bausteine und generische Datentests zur Qualitätssicherung, alle optimiert für das spezifische Verhalten von ClickHouse und unsere Datenmuster.
Entwicklung von DataOps-Tools, darunter CI-Pipelines, Frameworks für Datenmigrationen und Sicherheitskontrollen, mit besonderem Augenmerk auf Zuverlässigkeit, einfache Self-Service-Nutzung und Skalierbarkeit.
Beiträge zum Team
Gründliche Code-Reviews für Teammitglieder und andere Mitwirkende im Team durchführen.
Aktiv an technischen und architektonischen Designgesprächen teilnehmen.
In bestimmten Bereichen unseres Stacks die technische Führung übernehmen.
Die Entwicklungsumgebung des Teams kontinuierlich verbessern, mit besonderem Augenmerk auf Automatisierung, einschließlich KI-gestützter Workflows.
Durch proaktive Fehlerbehebung und zeitnahe Lösung von Vorfällen zur Stabilität der Plattform beitragen.
Datenmodellierung
Geschäftliche Datenmodelle gemäß unseren Modellierungsstandards und den Best Practices für ClickHouse entwickeln, überarbeiten und optimieren.
Mitwirkende durch Code-Reviews und technische Anleitung betreuen und unterstützen.
Den Entwurf und die Implementierung der technisch anspruchsvollsten Data Marts leiten, insbesondere solcher mit hoher Datengeschwindigkeit, großen Datenmengen oder komplexer Geschäftslogik.
Erforderlich:
Hervorragende SQL-Kenntnisse. Diese sind unabdingbar.
Umfassende praktische Erfahrung mit Airflow, dbt und Python.
Nachweisliche Erfolge beim Aufbau und bei der Optimierung von Daten-Pipelines im großen Maßstab mit hohem Durchsatz.
Solides Verständnis der Grundlagen von Data Warehousing: ETL/ELT, dimensionale Modellierung und Datenqualität.
Bachelorabschluss in Informatik oder einem verwandten Fachgebiet.
Freude daran, in einem schnelllebigen Start-up-Umfeld erfolgreich zu arbeiten. Es ist spannend und dynamisch, aber manchmal auch wunderbar chaotisch.
Von Vorteil:
Praktische Erfahrung mit ClickHouse. Das ist ein deutlicher Vorteil.
Vertrautheit mit AWS oder anderen Cloud-Plattformen.
Erfahrung mit der Entwicklung von CI/CD, insbesondere mit GitHub Actions.
Flexibles Arbeitsumfeld: ClickHouse ist ein global verteiltes und remote-freundliches Unternehmen. Wir sind derzeit in mehr als 25 Ländern tätig.
Gesundheitsversorgung: Arbeitgeberbeiträge zu deiner Gesundheitsversorgung.
Unternehmensanteile: Jedes neue berechtigte Teammitglied, das zu unserem Unternehmen kommt, erhält Unternehmensanteile.
Freizeit: Flexible Freizeitregelung in den USA und großzügiger Urlaubsanspruch in anderen Ländern.
Einrichtung des Homeoffice im Wert von USD$500, wenn du remote arbeitest.
Globale Zusammenkünfte: Wir glauben an die Bedeutung persönlicher Begegnungen und bieten Gelegenheiten, bei unternehmensweiten Offsites Kolleginnen und Kollegen zu treffen.
Als Teil eines schnell wachsenden Start-ups wirst du unsere Kultur maßgeblich mitgestalten.
Möchtest du mehr über unsere Kultur erfahren? Lies hier mehr über unsere Werte. Sieh dir unsere Blogbeiträge an oder folge uns auf LinkedIn, um mehr darüber zu erfahren, was bei ClickHouse passiert.
ClickHouse bietet allen Mitarbeitenden und Bewerbenden gleiche Beschäftigungschancen und verbietet Diskriminierung und Belästigung jeglicher Art aufgrund von Faktoren wie ethnischer Herkunft, Hautfarbe, Religion, Alter, Geschlecht, nationaler Herkunft, Behinderungsstatus, genetischen Merkmalen, dem Status als geschützte Veteranin oder geschützter Veteran, sexueller Orientierung, Geschlechtsidentität oder Geschlechtsausdruck sowie aufgrund anderer durch Bundes-, Landes- oder Kommunalgesetze geschützter Merkmale.
Unsere Datenschutzerklärung findest du hier.