Senior Data Engineer (m/w/d)

ITech Consult AG; Bern; Vor Ort; CHF 120.000 - 170.000; Vollzeit

Zusammenfassung

ITech Consult AG in Bern sucht einen erfahrenen Senior Data Engineer (m/w/d) mit Fokus auf AWS-basierte Dateninfrastrukturen und robuste Data Pipelines. Du arbeitest im DevOps-Team an modernen Datenplattformen und gestaltest Datenprodukte, betreibst Spark ETL und unterstützt Automatisierung, Betrieb sowie Kostenoptimierung.

Zu den Aufgaben gehören Aufbau und Pflege von AWS-Datenpipelines, enge Zusammenarbeit mit Data Owners, Analysts und Stakeholdern sowie Migrationen auf neue Tools.

Qualifikationen

• Hochschulabschluss in Informatik oder gleichwertige Berufserfahrung im Data Engineering.
• Mehrjährige Erfahrung in cloudbasierten Datenplattformen.
• Fundierte Kenntnisse in der Datenverarbeitung mit Apache Spark, SQL und Python.
• Erfahrung mit AWS Analytics Services wie Glue, SageMaker, Athena, Lambda oder Batch von Vorteil.
• Gute Deutschkenntnisse sowie gute Englischkenntnisse.
• Agiles Mindset, Teamorientierung und Freude am Wissensaustausch.

Aufgaben

• Entwicklung und Pflege einer AWS-basierten Dateninfrastruktur und entsprechender Datenpipelines.
• Optimierung und Sicherstellung des Betriebs von Spark ETL für effiziente Datenverarbeitung.
• Entwicklung und Pflege robuster Datenpipelines in Zusammenarbeit mit Data Owners und Data Analysts.
• Analyse von Anforderungen sowie Konzeption und Umsetzung von Datenprodukten im Big Data Stack.
• Unterstützung und Coaching von Data Engineers bei Automatisierung, Betrieb und Weiterentwicklung des Entwicklungs Stacks.
• Enge Zusammenarbeit mit Business Stakeholdern und Architektur zur Ausrichtung technischer Lösungen an Geschäftsbedürfnissen.
• Unterstützung bei der Kostenoptimierung bestehender AWS Services.
• Mitarbeit bei Migrationen auf neue Tools und Technologien.
• Sicherstellung von stabilen, nachvollziehbaren und wartbaren Datenlösungen im DevOps Umfeld.

Kenntnisse

Agiles Mindset

Teamorientierung

Deutschkenntnisse

Englischkenntnisse

Ausbildung

Hochschulabschluss Informatik

Tools

Apache Spark

SQL

Python

AWS

Terraform

CI/CD

Glue

SageMaker

Athena

Lambda

Jobbeschreibung

Für ein anspruchsvolles Data Engineering Umfeld suchen wir einen erfahrenen Senior Data Engineer (m/w/d) mit Fokus auf AWS basierte Dateninfrastrukturen, robuste Datenpipelines und performante ETL Verarbeitung.

In dieser Rolle arbeitest du als Teil eines DevOps Teams an der Entwicklung, Pflege und Optimierung moderner Datenplattformen. Du gestaltest Datenprodukte, stellst den stabilen Betrieb von Spark ETL sicher und unterstützt das Team bei Automatisierung, Betrieb, Kostenoptimierung und Weiterentwicklung des bestehenden Big Data Stacks.

Aufgaben:

• Entwicklung und Pflege einer AWS basierten Dateninfrastruktur und entsprechender Datenpipelines


• Optimierung und Sicherstellung des Betriebs von Spark ETL für effiziente Datenverarbeitung


• Entwicklung und Pflege robuster Datenpipelines in Zusammenarbeit mit Data Ownern und Data Analysts


• Analyse von Anforderungen sowie Konzeption und Umsetzung von Datenprodukten im Big Data Stack


• Unterstützung und Coaching von Data Engineers bei Automatisierung, Betrieb und Weiterentwicklung des Entwicklungs Stacks


• Enge Zusammenarbeit mit Business Stakeholdern und Architektur zur Ausrichtung technischer Lösungen an Geschäftsbedürfnissen


• Unterstützung bei der Kostenoptimierung bestehender AWS Services


• Mitarbeit bei Migrationen auf neue Tools und Technologien


• Sicherstellung von stabilen, nachvollziehbaren und wartbaren Datenlösungen im DevOps Umfeld

Erfahrungen:

• Hochschulabschluss in Informatik oder gleichwertige Berufserfahrung im Data Engineering Umfeld


• Mehrjährige Erfahrung als Data Engineer, idealerweise in cloudbasierten Datenplattformen


• Fundierte Erfahrung in der Datenverarbeitung mit Apache Spark, SQL und Python


• Erfahrung in der Entwicklung, Pflege und Optimierung von ETL Prozessen und Datenpipelines


• Erfahrung mit AWS basierten Datenplattformen und Big Data Architekturen


• Erfahrung in DevOps Teams sowie Verständnis für Betrieb, Monitoring und kontinuierliche Verbesserung von Datenpipelines


• Interesse oder Erfahrung mit CI/CD, Infrastructure as Code und Terraform


• Erfahrung mit AWS Analytics Services wie Glue, SageMaker, Athena, Lambda oder Batch von Vorteil


• Kenntnisse in Scala oder Java von Vorteil


• Agiles Mindset, Teamorientierung und Freude daran, Wissen aktiv mit Kolleginnen und Kollegen zu teilen


• Gute Deutschkenntnisse sowie gute Englischkenntnisse

Referenznr.: 925172DO