Senior Data Engineer — Big Data, Spark & ETL Pipelines

agap2; Lisboa; On-site; EUR 70,000 - 120,000; Full time

Job summary

agap2IT в Лиссабоне ищет опытного Data Engineer для разработки и оптимизации конвейеров обработки данных. Ваши задачи — проектирование и внедрение ETL‑процессов, работа с большими данными и базами данных, обеспечение качества данных и производительности пайплайнов.

Кандидат должен иметь крепкий опыт (5+ лет) в области Data Engineering, владение Python/Java/Scala и знание Databricks/Hadoop/Spark. Опыт работы в европейской IT‑среде приветствуется, вакансии открыты в Лиссабоне/порту.

Qualifications

• Степень в компьютерной инженерии или аналогичной области
• 5+ лет опыта Data Engineer
• Опыт программирования: Python, Java, Scala
• Опыт ETL
• Опыт с большими данными: Databricks, Hadoop и/или Spark
• Опыт баз данных: SQL и/или NoSQL
• Опыт создания пайплайнов

Skills

Data Engineer exp

Python

Java

Scala

ETL

Pipelines

SQL

NoSQL

Education

Degree in Computer Engineering

Tools

Databricks

Hadoop

Spark

Job description

agap2IT в Лиссабоне ищет опытного Data Engineer для разработки и оптимизации конвейеров обработки данных. Ваши задачи — проектирование и внедрение ETL‑процессов, работа с большими данными и базами данных, обеспечение качества данных и производительности пайплайнов.

Кандидат должен иметь крепкий опыт (5+ лет) в области Data Engineering, владение Python/Java/Scala и знание Databricks/Hadoop/Spark. Опыт работы в европейской IT‑среде приветствуется, вакансии открыты в Лиссабоне/порту.