Remote Data Engineer — Regulated Finance on Azure & AI

HireHi; United States; Remote; USD 120,000 - 190,000; Full time

Job summary

HireHi ищет инженера по данным с опытом работы в облаке Azure для разработки современной платформы данных и аналитики. Вы будете проектировать конвейеры загрузки данных, строить решения на Azure Databricks и Delta Lake, внедрять medallion-архитектуру и помогать миграции отчетности.

Требуется 6+ лет в Data Engineering, знание Python, SQL, PySpark, Azure Data Factory, Databricks и Azure Data Lake Gen2. Работа удаленная с гибким графиком и взаимодействием с международной командой.

Qualifications

• 6+ лет опыта в Data Engineering.
• Практический опыт Azure Data Factory, Azure Databricks и Azure Data Lake Storage Gen2.
• Сильное программирование на Python, SQL и PySpark.

Responsibilities

• Проектирование и разработка пайплайнов загрузки данных из бизнес-систем в управляемую облачную платформу данных.
• Создание масштабируемых решений по данным с использованием Azure Databricks и Microsoft Fabric.
• Реализация архитектур medallion и повторно используемых инженерных фреймворков.
• Разработка курируемых продуктов данных и аналитических наборов для отчетности и принятия решений.
• Применение AI-поддержки разработки с обеспечением качества, управления и аудита.
• Участие в моделировании данных, семантическом моделировании, управлении метаданными и аналитическими решениями.
• Содействие миграции отчетности и аналитических нагрузок с устаревших платформ.

Skills

Data engineering

Azure Data Factory

Azure Databricks

Azure Data Lake Gen2

Python

SQL

PySpark

Delta Lake

CI/CD

Git/Azure DevOps

Architecture decisions

Stakeholder communication

Tools

Databricks

Azure Data Factory

Azure Data Lake Storage Gen2

Git

Azure DevOps

Job description

HireHi ищет инженера по данным с опытом работы в облаке Azure для разработки современной платформы данных и аналитики. Вы будете проектировать конвейеры загрузки данных, строить решения на Azure Databricks и Delta Lake, внедрять medallion-архитектуру и помогать миграции отчетности.

Требуется 6+ лет в Data Engineering, знание Python, SQL, PySpark, Azure Data Factory, Databricks и Azure Data Lake Gen2. Работа удаленная с гибким графиком и взаимодействием с международной командой.