Remote Data Engineer - Supply Chain Analytics

HireHi; United States; Remote; USD 90,000 - 130,000; Full time

Benefits offered by this job

Remote work possible

Job summary

Intellias ищет опытного инженера данных для разработки и сопровождения рекомендованных Data Lake/ETL-уровня на базе Databricks. Ваша роль — проектирование моделей данных, оптимизация запросов и реализация ETL-процессов в гибридной/удаленной среде.

Кандидат должен иметь 4+ года опыта, продвинутые навыки Python и SQL, а также знания Azure и Databricks. Конкурентная оплата и возможность удаленной работы в регионе Европа/Украина.

Qualifications

• 4+ года опыта инженера данных
• Навыки продвинутого Python
• Навыки продвинутого SQL
• Опыт пакетов ETL/ELT пакетной и потоковой обработки на Databricks
• Опыт работы с Delta Lake, Structured Streaming, Unity Catalog, Databricks Workflows и Git
• Опыт работы с Azure Data Lake Storage Gen2, Azure Data Factory и Azure Functions
• Наличие Databricks Certification будет преимуществом

Responsibilities

• Сотрудничество с бизнес-заинтересованными лицами и техническими командами для анализа требований к данным
• Проектирование и внедрение моделей данных и структур баз данных
• Профилирование и оптимизация производительности баз данных
• Проектирование и реализация сложных ETL-процессов
• Обеспечение целостности и качества данных
• Руководство и наставничество в команде
• Р supervise и вклад в стратегию данных проекта

Skills

Python

SQL

Data engineering

Education

Databricks Certification (Data Engineer)

Tools

Databricks

Delta Lake

Structured Streaming

Auto Loader

Delta Live Tables

Unity Catalog

Databricks Workflows

Git integration

Azure Data Lake Storage Gen2

Azure Data Factory

Azure Functions

Job description

Intellias ищет опытного инженера данных для разработки и сопровождения рекомендованных Data Lake/ETL-уровня на базе Databricks. Ваша роль — проектирование моделей данных, оптимизация запросов и реализация ETL-процессов в гибридной/удаленной среде.

Кандидат должен иметь 4+ года опыта, продвинутые навыки Python и SQL, а также знания Azure и Databricks. Конкурентная оплата и возможность удаленной работы в регионе Европа/Украина.