Remote Data Engineer - ELT/ETL, Airflow & Snowflake

EPAM

United States

À distance

USD 120 000 - 160 000

Plein temps

14 jours+

Obtenez une réponse de cet employeur

Votre CV et votre lettre de motivation, adaptés exactement à ce que l’employeur recherche.

Passez les filtres ATS

Résumé du poste

EPAM ищет опытного специалиста по Data Engineering для разработки и оптимизации ETL/ELT пайплайнов, включая пакетные и near‑real-time решения. Ваша задача — проектировать архитектуру, управлять оркестрациями и интеграцией данных, обеспечивая качество и документацию.

Требуется продвинутый опыт в облачных инструментах интеграции, Airflow, SQL/Python/PySpark, а также работа с хранилищами Snowflake/Azure Synapse. Вакансия предполагает удалённую работу в нескольких локациях.

Qualifications

  • 5+ лет опыта в data engineering, warehousing и интеграции данных от начала до конца.
  • Знание облачных инструментов интеграции: Azure Data Factory, AWS Glue или GCP Dataflow.
  • Опыт с Apache Airflow; знакомство с CDC/потоковыми технологиями как Kafka, Debezium.
  • Кодинг на SQL, Python, PySpark/Apache Spark на продакшн.
  • Опыт работы с Snowflake, PostgreSQL, MS SQL Server или Azure Synapse.
  • Понимание OLAP/OLTP, схем Star и Snowflake, Delta Lake.
  • Git и CI/CD для data products.
  • Умение объяснять сложные идеи бизнес-заказчикам и разработчикам.
  • Уровень английского не ниже Upper-Intermediate.
  • Дополнительные навыки: dbt, Docker/Kubernetes, AWS Lambda или Azure Functions.

Responsabilités

  • Проектирование, сборка и оптимизация пакетных и ближневременных ETL/ELT пайплайнов.
  • Разработка и управление оркестрациями рабочих процессов и автоматизацией загрузки данных.
  • Проектирование и реализация слоёв хранилища данных и озера данных с разбиением, индексированием и SCD Type 2.
  • Установка и контроль качества данных и фреймворков валидации.
  • Определение требований к данным, анализ ограничений и архитектурные решения Source-to-Target mappings.
  • Поддержка чистого, модульного репозитория кода.
  • Лидерство в код-ревью и соблюдение инженерных стандартов.
  • Настройка CI/CD пайплайнов с Docker контейнерами.
  • Доставка технических спецификаций, документации по метаданным и словарей данных.

Connaissances

Data engineering
Data warehousing
End-to-end data integration
SQL
Python
PySpark / Apache Spark
OLAP/OLTP
Star/Snowflake schemas
Delta Lake/Lakehouse
Git
CI/CD pipelines
English communication
Airflow
dbt (nice to have)

Outils

Azure Data Factory
AWS Glue
GCP Dataflow
Apache Airflow
Kafka
Debezium
Snowflake
ClickHouse
PostgreSQL
MS SQL Server
Azure Synapse
Docker
Kubernetes
AWS Lambda
Azure Functions
RESTful APIs

Description du poste

EPAM ищет опытного специалиста по Data Engineering для разработки и оптимизации ETL/ELT пайплайнов, включая пакетные и near‑real-time решения. Ваша задача — проектировать архитектуру, управлять оркестрациями и интеграцией данных, обеспечивая качество и документацию.

Требуется продвинутый опыт в облачных инструментах интеграции, Airflow, SQL/Python/PySpark, а также работа с хранилищами Snowflake/Azure Synapse. Вакансия предполагает удалённую работу в нескольких локациях.

Obtenez votre examen gratuit et confidentiel de votre CV.

ou faites glisser et déposez votre fichier ici.

Similar jobs

Postes similaires à comparer

data engineer data integration
data engineer data integration

EPAM • États-Unis

À distance
USD 120 000 - 180 000
Lead Data Engineer: Spark Pipelines & Cloud Scale
Lead Data Engineer: Spark Pipelines & Cloud Scale

EPAM • États-Unis

À distance
USD 150 000 - 230 000
Relocation opportunities
Certifications (GCP, Azure, AWS)
Free English classes
+2
Data Engineer: Snowflake Migrations & Airflow (Remote)
Data Engineer: Snowflake Migrations & Airflow (Remote)

AgileEngine, LLC. • États-Unis

Hybride
USD 120 000 - 180 000
Mentorship
Tech Talks
Growth roadmaps
+3
Data Engineer: Snowflake & Airflow Pipelines
Data Engineer: Snowflake & Airflow Pipelines

Quantori • États-Unis

À distance
USD 120 000 - 180 000
Lead Data Software Engineer, Spark & Distributed Systems
Lead Data Software Engineer, Spark & Distributed Systems

EPAM • États-Unis

À distance
USD 140 000 - 190 000
Certifications (GCP, Azure, AWS)
Free English classes
Global relocation opportunities
+1
Remote Data Engineer - DWH, Spark & Airflow
Remote Data Engineer - DWH, Spark & Airflow

Умная Логистика • États-Unis

À distance
USD 90 000 - 150 000
Data engineer for large-scale platforms
Data engineer for large-scale platforms

AgileEngine, LLC. • États-Unis

Hybride
USD 120 000 - 180 000
Mentorship
Tech Talks
Growth roadmaps
+3
Data Engineer (Senior) - Snowflake
Data Engineer (Senior) - Snowflake

Data jobs feed • États-Unis

À distance
USD 332 000 - 387 000
Senior Data Engineer: Spark, Airflow & Data Vault 2.0
Senior Data Engineer: Spark, Airflow & Data Vault 2.0

NDA • États-Unis

À distance
USD 120 000 - 180 000
Senior Data Integration Engineer (Databricks/Snowflake)
Senior Data Integration Engineer (Databricks/Snowflake)

EPAM Systems • États-Unis

À distance
USD 120 000 - 180 000