Data Engineer – Schwerpunkt Programmierung & Datenpipelines*

Haeger Consulting; Bonn; Hybrid; EUR 70.000 - 105.000; Vollzeit

Benefits dieser Stelle

Homeoffice-Option

Flexible Arbeitszeiten

Gestaltungsspielraum im Data-Bereich

Zusammenfassung

Haeger Consulting sucht einen erfahrenen Data Engineer, der Datenflüsse effizient gestaltet, große Volumen performant verarbeitet und saubere Pipelines baut. Der Schwerpunkt liegt auf Entwicklung und Datenverarbeitung in Beratungsprojekten mit Spark/PySpark, SQL, Python und modernen Orchestrierungstools.

Sie arbeiten an skalierbaren ETL/ELT-Lösungen, modellieren Daten nach Data Vault und Lakehouse-Prinzipien und unterstützen Analytics- und ML-Pipelines.

Qualifikationen

• Mehrjährige Berufserfahrung in den genannten Themenfeldern.
• Sehr gute SQL-Kenntnisse sowie sehr gute Spark-/PySpark-Kenntnisse.
• Sicherer Umgang mit Python, Erfahrung mit dbt und Airflow.
• Sicherer Umgang mit Snowflake und/oder Databricks sowie Erfahrung in dimensionale Modellierung, Data Vault, Normalisierung und Denormalisierung.
• Analytisches Denken und Freude an sauberer Lösung komplexer Datenprobleme.
• Selbstorganisation und Überblick auch in Mehrkundenprojekten.
• Interesse an Consulting und wechselnden, spannenden Projekten.

Aufgaben

• Entwicklung skalierbarer ETL/ELT-Datenpipelines für Batch- und Streaming-Verarbeitung.
• Entwicklung von Pipelines mit Spark/PySpark, Python und SQL.
• Implementierung von Datenmodellen nach Kimball, Data Vault oder Lakehouse-Prinzipien.
• Transformation, Normalisierung und Denormalisierung von Quelldaten.
• Orchestrierung von Pipelines mit Airflow oder vergleichbaren Tools; Arbeiten mit Snowflake/Databricks.
• Unterstützung von Datenanalyse- und Machine-Learning-Pipelines.
• Gewährleistung von Qualität durch Testing, Dokumentation und CI/CD.

Kenntnisse

SQL

Spark

PySpark

Python

Data modelling

Data Vault

Normalisierung

Denormalisierung

Tools

dbt

Airflow

Snowflake

Databricks

Jobbeschreibung

Was dich erwartet

Du liebst es, Daten zum Fließen zu bringen, große Datenmengen performant zu verarbeiten und saubere Pipelines zu bauen? Dein Schwerpunkt liegt klar auf Entwicklung und Datenverarbeitung? Dann bist du hier richtig.

• Du arbeitest im Consulting-Umfeld und entwickelst für unterschiedliche Kunden immer wieder neue, abwechslungsreiche Datenlösungen.
• Du entwickelst skalierbare ETL/ELT-Datenpipelines für Batch- und Streaming-Verarbeitung und arbeitest mit Spark / PySpark, Python und SQL.
• Du implementierst Datenmodelle nach Kimball, Data Vault oder Lakehouse-Prinzipien.
• Du transformierst, normalisierst und denormalisierst Daten aus verschiedenen Quellsystemen.
• Du orchestrierst Datenpipelines mit Airflow oder vergleichbaren Tools und arbeitest mit Databricks, Snowflake oder ähnlichen Plattformen.
• Du unterstützt Datenanalyse- und Machine-Learning-Pipelines.
• Du sorgst für Qualität durch Testing, Dokumentation und CI/CD.

Was du mitbringst

• Du bringst mehrjährige Berufserfahrung in den oben genannten Themen mit und hast sehr gute SQL-Kenntnisse sowie sehr gute Kenntnisse in Spark / PySpark.
• Du arbeitest sicher mit Python, hast Erfahrung mit dbt und Airflow oder vergleichbaren Orchestrierungstools.
• Du bist sicher im Umgang mit Snowflake und/oder Databricks und erfahren in Datenmodellierung (dimensionale Modellierung, Data Vault, Normalisierung & Denormalisierung).
• Du denkst analytisch und hast Freude daran, komplexe Datenprobleme sauber zu lösen.
• Erfahrung in Datenmodellierung (dimensionale Modellierung, Data Vault, Normalisierung & Denormalisierung)
• Du denkst analytisch und hast Freude daran, komplexe Datenprobleme sauber zu lösen.
• Du arbeitest selbstorganisiert und behältst auch in mehreren Kundenprojekten den Überblick.
• Du hast Lust auf Consulting und wechselnde, spannende Projekte.
• Du kommunizierst offen und konstruktiv und schätzt offenes Feedback.

Worauf du dich freuen kannst - unsere Benefits

• Innovative Projekte und kreatives Umfeld: Du arbeitest an spannenden Kundenprojekten in einem kreativen und dynamischen Arbeitsumfeld mit viel Raum für eigene Ideen und persönliche Weiterentwicklung.
• Agilität: Du wirst Teil eines Teams, das agil und flexibel arbeitet, um immer die besten Ergebnisse zu erzielen.
• Flexibilität: Gestalte deinen Arbeitstag nach deinen Bedürfnissen – mit der Option auf Homeoffice und flexiblen Arbeitszeiten.
• Gestaltungsspielraum: Du hast die Möglichkeit, den Data-Bereich bei uns aktiv mitzugestalten und weiter auszubauen.
• Wissen teilen & gemeinsam wachsen – Du profitierst von intensivem internem Know-how-Transfer und hast die Möglichkeit, Dich aktiv an der Weiterentwicklung des Teams zu beteiligen – fachlich wie menschlich.
• Teamgeist: In unserem offenen und kollegialen Umfeld wird Teamarbeit großgeschrieben – wir glauben daran, dass die besten Ideen im Austausch entstehen. Wir schätzen Vielfalt und fördern eine Kultur der Inklusion. Bei uns ist jeder herzlich willkommen!
• Attraktive Benefits: Du bekommst ein attraktives Gehalt, diverse Benefits und coole Mitarbeiterevents.

Wir freuen uns über Bewerbungen von allen Personen, unabhängig von Geschlecht, Alter, ethnischer Herkunft, Religion, Weltanschauung, Behinderung oder sexueller Identität. Menschen mit Behinderung werden bei gleicher Qualifikation bevorzugt berücksichtigt. Um die Lesbarkeit und Verständlichkeit zu fördern, haben wir in der gesamten Jobanzeige eine einheitliche Schreibweise gewählt. Diese dient ausschließlich der besseren Orientierung und beinhaltet keinerlei Wertung oder Ausschluss.