data engineer in modern data platforms

HireHi; United States; Remote; USD 90,000 - 150,000; Full time

Benefits offered by this job

Long-term contract (12+ months)

B2B engagement

Job summary

HireHi ищет опытного инженера по данным для построения и эволюции современных data-платформ с использованием Databricks, Delta Lake и Azure. Вы будете разрабатывать пайплайны на Python и PySpark, писать эффективный SQL и оптимизировать рабочие нагрузки, обеспечивая стабильную работу производственных систем.

Требуется 2–3+ года опыта и уверенные навыки в архитектуре данных. Роль предполагает долгосрочный контракт с возможностью B2B сотрудничества и работу в динамичной среде.

Qualifications

• 2–3+ лет практического опыта Databricks
• Сильные навыки Python и PySpark
• Отличные навыки SQL
• Опыт работы с Azure
• Опыт Kubernetes
• Глубокое понимание data engineering и архитектуры
• Опыт оптимизации рабочих нагрузок Databricks/Spark
• Умение работать автономно на старшем инженерном уровне
• Желателен Databricks сертификат

Responsibilities

• Строить и улучшать современные data-платформы
• Работать с Databricks и Delta Lake
• Разрабатывать data-решения на Python и PySpark
• Писать и оптимизировать SQL и data-пайплайны
• Строить, оптимизировать ETL/ELT процессы
• Обеспечивать производительность и масштабируемость платформ
• Работать в облаке Azure
• Работать в Kubernetes и контейнеризованных средах
• Проектировать масштабируемые архитектуры данных
• Устранять проблемы и поддерживать продакшн

Skills

Databricks

Python

PySpark

SQL

Azure

Kubernetes

Data engineering

Tools

Databricks

Azure

Kubernetes

Job description

Описание

The consultancy delivers modern data platforms and large-scale data engineering solutions, with a focus on scalability, performance, and modern data and AI engineering practices.

Задачи

• Build and improve modern data platforms
• Work with Databricks and Delta Lake
• Develop data solutions using Python and PySpark
• Write and optimise SQL and data engineering workflows
• Build and maintain data pipelines and ETL/ELT processes
• Optimise performance and platforms
• Work with Azure cloud infrastructure
• Work in Kubernetes and containerised environments
• Design scalable data architectures and solutions
• Troubleshoot issues and provide production support
• Build, optimise, and challenge existing solutions

Требования

• 2–3+ Years of hands‑on Databricks experience
• Strong Python and PySpark skills
• Excellent SQL skills
• Experience working with Azure
• Kubernetes experience
• Strong understanding of data engineering and architecture
• Experience optimising Databricks/Spark workloads
• Comfortable working independently in a senior engineering capacity
• Nice to have: Databricks certifications

Условия

• Long-term contract of 12 months+
• B2B engagement