(Junior) Cloud Data Engineer (all genders)

DYMATRIX GmbH; Stuttgart; Vor Ort; EUR 40.000 - 60.000; Vollzeit

Zusammenfassung

DYMATRIX GmbH in Karlsruhe sucht einen (Junior) Data Engineer, der in interdisziplinären Teams an der technischen Umsetzung von datenverarbeitenden Prozessen in Batch und Realtime arbeitet. Du bist Ansprechpartner für Kollegen und Kunden und entwickelst Lösungen mit modernen cloud-basierten Technologien.

Die Position erfordert Kenntnisse in C#, Python, SQL und ein Verständnis für Cloud-Architekturen. Das Unternehmen bietet Einstiegsmöglichkeiten für Berufseinsteiger sowie zahlreiche Benefits.

Qualifikationen

• Erste Kenntnisse in Programmierung, idealerweise in C#, Python und Pyspark.
• SQL-Kenntnisse zur Datenanalyse und Qualitätssicherung.
• Interesse an Cloud-Architekturen und Datenverarbeitungsprozessen.

Aufgaben

• Entwicklung von Azure Functions zur Abbildung von Datentransformationen.
• Erstellung und Pflege von Azure Data Factory Pipelines.
• Entwicklung von Azure Databricks Notebooks für ETL-Prozesse.

Kenntnisse

Programmierkenntnisse in C#

Programmierkenntnisse in Python

SQL-Kenntnisse

Interesse an Datenmodellierung

Verständnis für Cloud-Architekturen

Tools

Azure SQL Database

Azure Cosmos DB

Databricks

Azure Data Factory

Jobbeschreibung

Allgemein:

In einem interdisziplinären Projektteam übernimmst Du den Part der technischen Umsetzung von Datenverarbeitungsstrecken in Batch und Realtime. Als Experte für das Data Engineering bist Du im Projekt Ansprechpartner für Kollegen und Kunden. Mit modernen cloud-basierten Technologien generierst Du - KI-unterstützt - innovative Lösungen rund um unsere Produkte.

Wir suchen Dich mit und ohne Berufserfahrung, als (Junior) Data Engineer (all genders) für unsere Standorte inKarlsruhe, Stuttgart, Hamburg,München oder Köln.

Tech Stack:

• Azure SQL Database, Azure Cosmos DB und Datalake Storage
• Weitere Komponenten aus dem Azure Stack wie Log Analytics, KeyVault, API Management
• Azure Portal
• Unternehmenseigener OpenAI-basierter KI-Assistent
• Projektverwaltung in JIRA und Confluence

Deine Aufgaben:

• Entwicklung von Azure Functions in .NET C# zur Abbildung von Datentransformationen in Realtime. REST API
• Erstellung und Pflege von Azure Data Factory Pipelines zur Automatisierung von Datentransfers.
• Entwicklung von Azure Databricks Notebooks, insbesondere zur Implementierung von ETL-Prozessen mit PySpark – dabei sind erste Programmierkenntnisse und ein gutes Verständnis für Datenverarbeitung gefragt.
• Arbeiten mit SQL, inklusive der Durchführung von Qualitätssicherungen, Datenanalysen und gezielten Performanceoptimierungen auf Speichertechnologien wie Cosmos DB, Azure SQL DB und Data Lake Storage
• Optimierung und Feintuning der Prozesse durch Detailanalysen u. a. mit Log Analytics

Welche Studiengänge suchen wir?

Das bringst du idealerweise mit:

• Erste Kenntnisse Programmierkenntnisse (idealerweise in C#, Python und Pyspark).
• SQL-Kenntnisse zur Datenanalyse und Qualitätssicherung
• Verständnis für Cloud-Architekturen und Datenverarbeitungsprozesse
• Interesse an konzeptionellen Themen rund um Datenmodellierung und ETL-Design
• Bereitschaft zur Weiterentwicklung in Technologien wie Databricks und Data Factory

Das erwartet Dich:

Deine Benefits:

Wie läuft der Bewerbungsprozess?