Senior Data Engineer - Sponsored Content & Products (all genders)

About You - Collins GmbH & Co. KG; Hamburg, Berlin; Vor Ort; EUR 85.000 - 120.000; Vollzeit

Zusammenfassung

About You - Collins GmbH & Co. KG sucht eine/n Senior Data Engineer, der zentrale Dateninfrastrukturen mitgestaltet.

Du arbeitest an hochperformanten Replikationspipelines, verknüpfst Plattform- und Anwendungslevel und trägst maßgeblich zur Skalierung unserer CPC-basierten Retail-Umgebungen bei. Du evaluierst Speicher- und Datenmodelle, entscheidest über Engines wie MySQL, OpenSearch, BigQuery oder ClickHouse, arbeitest eng mit Backend- und Analytics-Teams und steigerst Betriebsstabilität sowie

Qualifikationen

• Erfahrung mit Datenarchitektur, ETL/Reverse-ETL und skalierbaren Pipelines.
• Fundierte Kenntnisse relationaler Systeme (MySQL) sowie moderner Speichersysteme.
• Verständnis von Datenmodellen und Reporting-Tools ist erforderlich.

Aufgaben

• Plattformen und Anwendungen verbinden: Hochdurchsatz-Reverse-ETL-Pipelines konzipieren, aufbauen und warten.
• Pipeline-Modernisierung: Migration der Datenverarbeitungspipelines in eine moderne Architektur leiten.
• Speicher- und Datenmodellierung bewerten und Entscheidungen über Engines treffen (MySQL/OpenSearch/BigQuery/ClickHouse).
• Cross-funktionale Zusammenarbeit mit Backend- und Analytics-Engineers, um skalierbare Strukturen zu entwerfen.
• Operational Excellence in der gesamten Dateninfrastruktur durch Monitoring und Stabilität stärken.
• Balance zwischen Innovation und Stabilität in der Infrastruktur wahren.
• Engineering-Standards setzen und technische Kompromisse abwägen.

Kenntnisse

Datenarchitektur

SQL

Datenmodellierung

ETL/Reverse-ETL

OpenSearch

BigQuery

ClickHouse

MySQL

Monitoring

Cross-functional Zusammenarbeit

Tools

OpenSearch

BigQuery

ClickHouse

MySQL

Jobbeschreibung

DasSponsored Content & Products-Team ist ein zentraler Wachstumstreiber. Das Ziel ist es, hochskalierbareSelf-Serve-Marketplaces aufCost-per-Click (CPC)-Basis aufzubauen. Diese ermöglichen es Marken, ihre Sichtbarkeit in Echtzeit direkt amdigitalen Point of Saleeffizient zu steigern.

Obwohl wir uns innerhalb eines bestehenden Ökosystems bewegen, bietet der architektonische Übergangvon einem Monolithen hin zu vier spezialisierten Produktteamsein hochgradig autonomes,Greenfield-ähnliches Umfeld. Deine Designentscheidungen werden unseren zukünftigen Tech-Stack maßgeblich prägen und uns dabei helfen, unserenRetail Media-Umsatz zu vervielfachen.

• Plattform- und Anwendungsebenen verbinden:Hochdurchsatz-Reverse-ETL-Replikationspipelines konzipieren, aufbauen und warten, um die Lücke zwischen zentralen Core-Plattformsystemen und kundenorientierten Reporting-Tools zu schließen
• Pipeline-Modernisierung:Die Migration unserer aktuellen, maßgeschneiderten Datenverarbeitungspipelines in eine moderne, scalable Datenarchitektur über einen sicheren Migrationspfad federführend leiten
• Speicher- & Datenmodellierung bewerten:Aktiv evaluieren, ob Daten für die jeweiligen Downstream-Use-Cases korrekt strukturiert sind, sowie strategische technische Entscheidungen darüber fällen, ob Workloads in relationale Engines (MySQL-Aggregate), schnelle Suchindex-Layouts (OpenSearch), Cloud-Warehouses (BigQuery) oder spaltenorientierte Speicher (ClickHouse) gehören
• Cross-funktionale Informationsarchitektur:Eng mit Backend-Engineer:innen und Analytics-Engineer:innen zusammenarbeiten, umhochperformante, skalierbare Datenstrukturenzu entwerfen, und dabei die Verantwortung für physische und logische Modellierungsgrenzen übernehmen
• Operational Excellence vorantreiben:Die operative Exzellenz in unserer gesamten Dateninfrastruktur stärken, indem proaktives Monitoring, Systemzuverlässigkeit und die allgemeine Stabilität der Anwendungen genauso priorisiert werden wie der Aufbau neuer Pipelines
• Balance zwischen Innovation und Stabilität:Einen sehr hohen Standard für die Stabilität der Dateninfrastruktur pflegen und sicherstellen, dass langfristige Wartbarkeit denselben Stellenwert hat wie die Bereitstellung neuer Features
• Engineering-Standards setzen und technische Kompromisse abwägen