Data Engineer Mid-Level (m/w/d)

Meyandy LLC; Berlin; Hybrid; EUR 65.000 - 90.000; Vollzeit

Benefits dieser Stelle

Aktienoptionen Octopus Energy Group

Nahverkehrszuschuss

Mittagszuschuss

Fahrradleasing

Betriebliche Altersvorsorge

Zusammenfassung

Octopus Energy Group sucht in Berlin einen Data Engineer Mid-Level (m/w/d) zur Mitgestaltung unserer modernen Data- und Analytics-Landschaft. Du arbeitest an Lakehouse-Pipelines, Data Modeling und Governance, und bringst Lightdash sowie Streamlit für interaktive Analytik ins Team.

Du bringst 2–4 Jahre Erfahrung im Data Engineering mit, beherrschst Databricks, dbt und Airflow, sowie SQL und Python. Die Rolle ist vor Ort in Berlin mit vielfältigen BI-/ML-Anwendungsfällen im Energiesektor.

Qualifikationen

• Wenigstens 2–4 Jahre Praxis im Data Engineering/Analytics Engineering.
• Fundierte Kenntnisse in Databricks-Umgebungen (Delta Lake, Unity Catalog).
• Sicheres SQL- und Python-Know-how sowie Erfahrung mit Git/CI/CD.

Aufgaben

• Aufbau, Optimierung und Betrieb von Lakehouse-Pipelines mit Databricks.
• Entwicklung von Self-Service-BI-Dashboards in Lightdash und Streamlit.
• ML-Use-Cases, Prototyping und Integration in Fachbereiche.
• Data-Quality-Prüfungen, Data Lineage und Performance-Optimierung.

Kenntnisse

Databricks

dbt

Apache Airflow

Lightdash

Streamlit

SQL

Python

Git

CI/CD

Data Modeling

Tools

Databricks

dbt

Apache Airflow

Lightdash

Streamlit

Jobbeschreibung

# Data Engineer Mid-Level (m/w/d)Octopus Energy GroupVia arbeitnowBerlin (DE), DEPubliée il y a 14h## Description du poste**Energie neu denken. Infrastruktur neu bauen. Zukunft neu gestalten – bei der Energy Metering Germany GmbH, einem Unternehmen der Octopus Energy Group.** Als innovativer Messstellenbetreiber treiben wir die Energiewende nicht nur voran – wir setzen sie technisch um.Digital, skalierbar und kompromisslos praxisorientiert.Von der Installation **intelligenter Messsysteme** inklusive Smart Meter Gateway über moderne Wallbox-Lösungen für Privathaushalte bis hin zu komplexen 1:n-Lösungen und CLS-Management nach §14a und §9 EnWG – wir bauen die vernetzte Energieinfrastruktur von morgen. Sicher, normkonform und hochautomatisiert.Unser Anspruch: Messstellenbetrieb neu definieren – als Rückgrat eines flexiblen, datengetriebenen Energiesystems. Dafür kombinieren wir regulatorische Exzellenz mit technischer Umsetzungskompetenz und operativer Geschwindigkeit.Wenn du nicht nur verwalten, sondern gestalten willst – dann baue mit uns das Energy Metering der nächsten Generation. Für den weiteren Ausbau und Betrieb unserer modernen Daten- und Analytics-Landschaft suchen wir einen vielseitigen **Mid-Level Data Engineer (m/w/d)**. In dieser Rolle bist du das Bindeglied zwischen robuster Data-Lakehouse-Infrastruktur, analytischem Reporting mit **Lightdash & Streamlit** und angewandten Data-Science-Use-Cases. **Deine Aufgaben:** Du begleitest Daten entlang ihres gesamten Lebenszyklus – von der Rohdatenaufnahme im Lakehouse über automatisierte Datenmodelle bis hin zu interaktiven Dashboards und Machine-Learning-gestützten Datenanwendungen.- **Lakehouse & Data Engineering (ca. 50%):** * Konzeption, Aufbau und Tuning performanter Pipelines auf Basis von **Databricks**. * Datenmodellierung mit **dbt** sowie Orchestrierung robuster DAGs via **Apache Airflow**. * **Governance & Performance:** + Etablierung automatisierter Data-Quality-Prüfungen, Data Lineage und Cluster-Optimierung. + **Analytics & Data Apps (ca. 25%):** - Aufbau einer semantischen Metriken-Schicht und Self-Service-BI in **Lightdash**. - Entwicklung interaktiver Analyse-Tools und Data Apps in Python (**Streamlit**). - **Data Science & ML (ca. 25%):** * Explorative Analysen, Prototyping und Training von ML-Modellen (z. B. Prognosen, Anomalien). * **MLOps & Business-Integration:** + Experiment-Tracking auf Databricks und Bereitstellung der Ergebnisse für Fachbereiche. **Dein Profil:** - **Berufserfahrung:** * Mindestens 2–4 Jahre Praxis im Data Engineering, Analytics Engineering oder einer vergleichbaren Rolle. * **Core Engineering Stack:** + Fundierte Praxis mit **Databricks** (Delta Lake, Unity Catalog), **dbt** und **Apache Airflow**. + **BI & Data Apps:** - Erfahrung mit **Lightdash** (oder Interesse an code-basierter BI) sowie mit **Streamlit**. - **Code & Datenbanksprachen:** * Exzellentes **SQL** (Performance-Tuning, komplexe Joins) und sehr gutes **Python** (pandas, PySpark, scikit-learn). * **Methodik & Best Practices:** + Routinierter Umgang mit **Git** / CI/CD und modernen Modellierungskonzepten (Star-Schema). + **Mindset & Sprachen:** - Pragmatische Hands-on-Mentalität, starke Kommunikationsfähigkeit und sehr gutes Deutsch & Englisch.Deine Benefits bei uns: Vergünstigungen & Vorsorge:- Aktienoptionen der Octopus Energy Group Ltd.- Monatlicher Zuschuss zum Nahverkehrsticket- Monatlicher Zuschuss zum Mittagessen- Vergünstigtes Fahrradleasing- Betriebliche Altersvorsorge - Nachhaltig unterwegs mit unserem E-Auto-Leasing Familie- B...**Data Engineer Mid-Level (m/w/d)** — Octopus Energy Group, Berlin (DE).