Senior Data Engineer: AWS, Spark & Python, DevOps

ITech Consult AG; Bern; Hybrid; CHF 120.000 - 170.000; Vollzeit

Zusammenfassung

ITech Consult sucht einen erfahrenen Senior Data Engineer (m/w/d) mit Fokus auf AWS basierte Dateninfrastrukturen und robuste Pipelines. Sie arbeiten in einem DevOps Umfeld an modernen Datenplattformen und arbeiten eng mit Data Ownern und Data Analysts zusammen.

Sie bringen mehrjährige Data-Engineering-Erfahrung, Expertise in Apache Spark, SQL und Python sowie Kenntnisse in ETL-Prozessen und Infrastruktur als Code (Terraform) mit. Deutsch- und Englischkenntnisse sind erwünscht.

Qualifikationen

• Abgeschlossenes Hochschulstudium in Informatik oder gleichwertige Berufserfahrung im Data Engineering
• Mehrjährige Erfahrung als Data Engineer, idealerweise in cloudbasierten Datenplattformen
• Fundierte Erfahrung in der Datenverarbeitung mit Apache Spark, SQL und Python
• Erfahrung in der Entwicklung, Pflege und Optimierung von ETL Prozessen und Datenpipelines
• Erfahrung mit AWS basierten Datenplattformen und Big Data Architekturen
• Erfahrung in DevOps Teams sowie Verständnis für Betrieb, Monitoring und kontinuierliche Verbesserung von Datenpipelines
• Interesse oder Erfahrung mit Terraform und Infrastructure as Code
• Gute Deutsch- und Englischkenntnisse

Aufgaben

• Entwicklung und Pflege einer AWS basierten Dateninfrastruktur und entsprechender Datenpipelines
• Optimierung und Sicherstellung des Betriebs von Spark ETL für effiziente Datenverarbeitung
• Entwicklung und Pflege robuster Datenpipelines in Zusammenarbeit mit Data Ownern und Data Analysts
• Analyse von Anforderungen sowie Konzeption und Umsetzung von Datenprodukten im Big Data Stack
• Unterstützung und Coaching von Data Engineers bei Automatisierung, Betrieb und Weiterentwicklung des Entwicklungs Stacks
• Enge Zusammenarbeit mit Business Stakeholdern und Architektur zur Ausrichtung technischer Lösungen an Geschäftsbedürfnissen
• Unterstützung bei der Kostenoptimierung bestehender AWS Services
• Mitarbeit bei Migrationen auf neue Tools und Technologien
• Sicherstellung von stabilen, nachvollziehbaren und wartbaren Datenlösungen im DevOps Umfeld

Kenntnisse

AWS

Apache Spark

Python

SQL

DevOps

CI/CD

Infrastructure as Code

Ausbildung

Hochschulabschluss in Informatik

Tools

Terraform

AWS

CI/CD Tools

Jobbeschreibung

ITech Consult sucht einen erfahrenen Senior Data Engineer (m/w/d) mit Fokus auf AWS basierte Dateninfrastrukturen und robuste Pipelines. Sie arbeiten in einem DevOps Umfeld an modernen Datenplattformen und arbeiten eng mit Data Ownern und Data Analysts zusammen.

Sie bringen mehrjährige Data-Engineering-Erfahrung, Expertise in Apache Spark, SQL und Python sowie Kenntnisse in ETL-Prozessen und Infrastruktur als Code (Terraform) mit. Deutsch- und Englischkenntnisse sind erwünscht.