Senior Data Engineer - AWS Data Platform & Spark ETL

ITech Consult AG; Bern; Hybrid; CHF 120.000 - 160.000; Vollzeit

Zusammenfassung

ITech Consult sucht einen Senior Data Engineer (m/w/d) mit Fokus auf AWS basierte Dateninfrastrukturen und robuste ETL-Verarbeitung. Du arbeitest in einem DevOps Team an modernen Datenplattformen, entwickelst und optimierst Pipelines sowie Datenprodukte im Big Data Stack.

Du bringst Hochschulabschluss in Informatik, mehrjährige Data-Engineering-Erfahrung, Spark, SQL und Python mit. Gute Deutsch- und Englischkenntnisse sind wünschenswert; Einsatzort ist Bern, 100% Pensum mit teilweiser

Qualifikationen

• Hochschulabschluss in Informatik oder gleichwertige Berufserfahrung im Data Engineering.
• Mehrjährige Erfahrung als Data Engineer, idealerweise in cloudbasierten Datenplattformen.
• Fundierte Erfahrung in der Datenverarbeitung mit Apache Spark, SQL und Python.
• Erfahrung in der Entwicklung, Pflege und Optimierung von ETL Prozessen und Datenpipelines.
• Erfahrung mit AWS basierten Datenplattformen und Big Data Architekturen.
• Erfahrung in DevOps Teams, Betrieb, Monitoring und kontinuierliche Verbesserung von Datenpipelines.
• Interesse oder Erfahrung mit CI/CD, Infrastructure as Code und Terraform.
• Erfahrung mit AWS Analytics Services wie Glue, SageMaker, Athena, Lambda oder Batch von Vorteil.
• Kenntnisse in Scala oder Java von Vorteil.
• Agiles Mindset, Teamorientierung und Wissens分享.
• Gute Deutschkenntnisse sowie gute Englischkenntnisse.

Aufgaben

• Entwicklung und Pflege einer AWS basierten Dateninfrastruktur und entsprechender Datenpipelines.
• Optimierung und Sicherstellung des Betriebs von Spark ETL für effiziente Datenverarbeitung.
• Entwicklung und Pflege robuster Datenpipelines in Zusammenarbeit mit Data Ownern und Data Analysts.
• Analyse von Anforderungen sowie Konzeption und Umsetzung von Datenprodukten im Big Data Stack.
• Unterstützung und Coaching von Data Engineers bei Automatisierung, Betrieb und Weiterentwicklung des Entwicklungs Stacks.
• Enge Zusammenarbeit mit Business Stakeholdern und Architektur zur Ausrichtung technischer Lösungen an Geschäftsbedürfnissen.
• Unterstützung bei der Kostenoptimierung bestehender AWS Services.
• Mitarbeit bei Migrationen auf neue Tools und Technologien.
• Sicherstellung von stabilen, nachvollziehbaren und wartbaren Datenlösungen im DevOps Umfeld.

Kenntnisse

Datenengineering

Teamarbeit

Agiles Mindset

Deutschkenntnisse

Englischkenntnisse

Cloud-Architektur

Datenplattformen

Ausbildung

Hochschulabschluss in Informatik

Tools

Apache Spark

SQL

Python

AWS

Terraform

CI/CD

AWS Glue

SageMaker

Athena

Lambda

Batch

Jobbeschreibung

ITech Consult sucht einen Senior Data Engineer (m/w/d) mit Fokus auf AWS basierte Dateninfrastrukturen und robuste ETL-Verarbeitung. Du arbeitest in einem DevOps Team an modernen Datenplattformen, entwickelst und optimierst Pipelines sowie Datenprodukte im Big Data Stack.

Du bringst Hochschulabschluss in Informatik, mehrjährige Data-Engineering-Erfahrung, Spark, SQL und Python mit. Gute Deutsch- und Englischkenntnisse sind wünschenswert; Einsatzort ist Bern, 100% Pensum mit teilweiser