Senior Data Engineer

1dea

United States

A distancia

USD 53.000 - 60.000

Jornada completa

Hace 3 días
Sé de los primeros/as/es en solicitar esta vacante

Una candidatura completa en un minuto

Currículum y carta de presentación personalizados, listos para enviar.

Supera los filtros ATS

Descripción de la vacante

1dea poszukuje specjalisty ds. danych do pracy zdalnej w 100%. Zadania obejmują projektowanie i rozwój strumieniowych potoków danych w czasie rzeczywistym z Apache Kafka i Confluent Cloud, tworzenie procesów ETL/ELT w Pythonie i SQL.

Wymagamy doświadczenia z Kafka, Python i SQL, znajomości MongoDB, oraz zdolności do projektowania architektury opartej na zdarzeniach w środowisku GCP; oferujemy długofalową współpracę B2B i stałe projekty.

Formación

  • Apache Kafka i Confluent Cloud – certyfikat dodatkowy, ale jego brak nie dyskwalifikuje
  • Python – praktyczne doświadczenie w inżynierii danych
  • SQL – zaawansowana znajomość i optymalizacja zapytań

Responsabilidades

  • Projektowanie i rozwój strumieniowych potoków danych w czasie rzeczywistym z użyciem Apache Kafka i Confluent Cloud
  • Tworzenie i optymalizowanie procesów ETL/ELT oraz skryptów w Pythonie i SQL
  • Modelowanie danych analitycznych i projektowanie hurtowni danych (gwiazda/płatka, SCD)
  • Konfiguracja i integracja źródeł danych z CDC oraz baz MongoDB
  • Współpraca przy projektowaniu i wdrażaniu architektury zdarzeń w chmurze GCP

Conocimientos

Apache Kafka
Confluent Cloud
Python
SQL

Herramientas

MongoDB

Descripción del empleo

Obszar: Consulting IT

Lokalizacja: 100% zdalnie

Delegacje: nie

Start: ASAP (z max 3msc dostępnością do startu)

Stawka: 155 - 175 PLN netto + VAT / h

Zaangażowanie: B2B (outsourcing z 1dea), full-time, długofalowo (6msc + przedłużenie)

Proces rekrutacyjny (100% zdalnie):
  • Krótka rozmowa telefoniczna informacyjno-zapoznawcza z rekruterem 1dea (~10 min)
  • Weryfikacja techniczno-projektowa z Klientem (~1 - 1,5 h)
  • (Jeśli OK) Rozmowa zapoznawcza z przedstawicielem projektu u Klienta końcowego (~ 30 min)
  • Decyzja o podjęciu współpracy
Zakres obowiązków:
  • Projektowanie i rozwój strumieniowych potoków danych w czasie rzeczywistym przy użyciu Apache Kafka oraz Confluent Cloud.
  • Tworzenie i optymalizowanie procesów ETL/ELT oraz skryptów przetwarzających dane w języku Python oraz zaawansowanych zapytań SQL.
  • Modelowanie danych analitycznych – projektowanie struktur hurtowni danych (w tym architektury modeli danych, modeli gwiazdy/płatka śniegu oraz obsługa mechanizmów Slowly Changing Dimensions - SCD).
  • Konfiguracja i integracja źródeł danych z wykorzystaniem narzędzi CDC (Change Data Capture) oraz baz danych takich jak MongoDB.
  • Współpraca przy projektowaniu i wdrażaniu systemów w oparciu o Event-driven Architecture w środowisku chmurowym GCP.
Kogo poszukujemy?
Wymagania kluczowe:
  • Apache Kafka oraz Confluent Cloud (znajomość platformy; certyfikat jest dodatkowym atutem, ale brak go nie dyskwalifikuje)
  • Python (praktyczne doświadczenie w inżynierii danych)
  • SQL (zaawansowana znajomość i optymalizacja zapytań)
Mile widziane:
  • Doświadczenie w projektowaniu systemów w oparciu o architekturę sterowaną zdarzeniami (Event-driven Architecture)
  • Znajomość narzędzi do CDC (Change Data Capture)
  • Doświadczenie w pracy z GCP (Google Cloud Platform)
  • Znajomość baz danych MongoDB
Consigue la evaluación confidencial y gratuita de tu currículum.

o arrastra y suelta tu archivo aquí

Similar jobs

Puestos de trabajo similares que vale la pena comparar

Data Engineer (with Snowflake & Airflow)
Data Engineer (with Snowflake & Airflow)

TQLO SP. Z O.O. • EE. UU.

A distancia
USD 46.000 - 81.000
Data Platform Developer (k/m/x)
Data Platform Developer (k/m/x)

B2bnetwork • EE. UU.

A distancia
USD 120.000 - 170.000
Senior Data Engineer
Senior Data Engineer

Codest • Town of Poland (NY)

Presencial
USD 120.000 - 160.000
Umowa B2B
Dni wolne święta
Karta Worksmile 300 zł
+1
Junior Data Engineer (Airflow / Snowflake)
Junior Data Engineer (Airflow / Snowflake)

TQLO SP. Z O.O. • EE. UU.

A distancia
USD 45.000 - 70.000
Data Engineer (Kafka / Confluent Cloud)
Data Engineer (Kafka / Confluent Cloud)

Upvanta • EE. UU.

A distancia
USD 100.000 - 150.000
Remote Senior Data Engineer - Kafka, Python & SQL
Remote Senior Data Engineer - Kafka, Python & SQL

1dea • EE. UU.

A distancia
USD 53.000 - 60.000
Senior Node.JS Developer with German
Senior Node.JS Developer with German

Awareson Sp. z o.o. • EE. UU.

A distancia
USD 48.000 - 80.000
Remote work
Long-term project
B2B contract
Senior Cloud Data Engineer (AWS and Databricks)
Senior Cloud Data Engineer (AWS and Databricks)

Future Processing • EE. UU.

A distancia
USD 46.000 - 67.000
Duża swoboda działania
Projekty międzynarodowe (UE/USA)
Szkolenia chmurowe AWS/Microsoft/Datbr
+4
Data Engineer / Snowflake
Data Engineer / Snowflake

Blackbird • EE. UU.

A distancia
USD 110.000 - 150.000
Data Engineer
Data Engineer

Future Processing • EE. UU.

A distancia
USD 28.000 - 41.000