Data Engineer – Remote (Poland) with Lakehouse Pipelines

HireHi; United States; Remote; USD 120,000 - 180,000; Full time

Job summary

HireHi ищет опытного data engineer для проектирования и эксплуатации конвейеров данных, обработки и моделирования в lakehouse. Требуется глубокий опыт PySpark, SQL и Databricks, а также участие в планировании и CI/CD процессах.

Кандидат будет владеть данными от источников до аналитических моделей, обеспечивая качество, контроль версий и устойчивость к производственным нагрузкам. Конкурентная компенсация и удаленная работа обсуждаются в зависимости от страны.

Qualifications

• Требуется степень бакалавра в области компьютерных наук, инжиниринга, информационных систем или в смежной дисциплине.
• Опыт 5+ лет в data engineering и рабочих условиях промышленных систем.
• Сильный опыт работы с Databricks в продуктивной среде; PySpark и SQL на продвинутом уровне.
• Опыт Declarative Pipelines или оркестрации конвейеров на Databricks.
• Понимание особенностей lakehouse, Delta таблиц, контроля качества и мониторинга.

Responsibilities

• Понимание требований и участие в планировании спринтов; проектирование и внедрение технических решений, включая ETL-пайплайны на PySpark.
• Оптимизация существующих ETL‑процессов для производительности и масштабируемости; написание модульных тестов.
• Поддержка QA-команды; устранение инцидентов в продакшене как инженер 3‑й линии; владение данными от источников до моделирования.
• Сотрудничество с бизнес-аналитиками, PMs и квантиками; предложение архитектур, обеспечивающих скорость,Governance и масштабируемость.

Skills

PySpark

SQL

Databricks

CI/CD pipelines

Data governance

Data ingestion

Data modeling

Big data

Education

Bachelor’s degree in Computer Science, Engineering, Information Systems

Tools

Databricks

Palantir Foundry

Delta lake

Job description

HireHi ищет опытного data engineer для проектирования и эксплуатации конвейеров данных, обработки и моделирования в lakehouse. Требуется глубокий опыт PySpark, SQL и Databricks, а также участие в планировании и CI/CD процессах.

Кандидат будет владеть данными от источников до аналитических моделей, обеспечивая качество, контроль версий и устойчивость к производственным нагрузкам. Конкурентная компенсация и удаленная работа обсуждаются в зависимости от страны.