Senior Data Lead: Scalable GCP Pipelines & Migration

GFT Technologies; Kraków; Hybrid; PLN 17,000 - 27,000; Full time

Benefits offered by this job

Hybrid work in Kraków 8 days a month

Benefit package: medical, sport, lunch

Online training and certifications

Access to e-learning platform

Social events

Job summary

GFT Technologies poszukuje doświadczonego lidera technicznego ds. danych do Krakowa. Będziesz prowadzić techniczną dostawę projektów migracji danych, projektować skalowalne potoki w GCP i wspierać zespół w ramach Agile. Wymagane co najmniej 10 lat doświadczenia w inżynierii danych i głębokie know-how w PySpark/Scala oraz GCP.

Oferujemy pracę hybrydową w Krakowie, pakiet benefitów i możliwości rozwoju zawodowego w międzynarodowym środowisku IT.

Qualifications

• Minimum 10 lat doświadczenia w projektowaniu oprogramowania i inżynierii danych.
• Silne doświadczenie w PySpark lub Scala.
• Doświadczenie z Google Cloud Platform i budową potoków danych w GCP.
• Doświadczenie z Apache Spark, Hadoop, Hive, ETL.
• Znajomość Python, SQL, PL/SQL i integracji danych.
• Doświadczenie z Apache Airflow lub podobnymi narzędziami harmonogramującymi.
• Znajomość REST APIs i usług RESTful.
• Silna znajomość Unix/Linux.
• Doświadczenie z Git, GitHub, Jenkins, Ansible i Jira.
• Umiejętność prowadzenia zespołu inżynierów i DBastosowanie technicznych.
• Dobra komunikacja i prezentacja dla technicznych i nietechnicznych odbiorców.
• Dobra znajomość języka angielskiego.

Responsibilities

• Prowadzenie technicznej dostawy projektów migracji danych i inżynierii.
• Projektowanie skalowalnych potoków danych w GCP przy użyciu PySpark/Scala.
• Mentorowanie inżynierów i prowadzenie pod-dopu technicznego.
• Zarządzanie środowiskami, architekturą systemów i wzorcami chmury.
• Wprowadzanie standardów kodowania, przeglądy kodu i dzielenie się wiedzą.
• Wspieranie środowisk produkcyjnych, diagnostyka i komunikacja wyników zespołom.
• Udział w planowaniu, sprintach i retrospektywach.
• Identyfikacja możliwości użycia narzędzi AI w workflowach inżynieryjnych.

Skills

Senior data engineer

GCP experience

PySpark/Scala

Cloud design patterns

REST APIs

Unix/Linux

CI/CD (Git/Jenkins)

English proficiency

Tools

GCP

Apache Spark

Airflow

Jira

GitHub

Jenkins

Ansible

Job description

GFT Technologies poszukuje doświadczonego lidera technicznego ds. danych do Krakowa. Będziesz prowadzić techniczną dostawę projektów migracji danych, projektować skalowalne potoki w GCP i wspierać zespół w ramach Agile. Wymagane co najmniej 10 lat doświadczenia w inżynierii danych i głębokie know-how w PySpark/Scala oraz GCP.

Oferujemy pracę hybrydową w Krakowie, pakiet benefitów i możliwości rozwoju zawodowego w międzynarodowym środowisku IT.