data engineer in cloud data platforms

DataArt; United States; A distancia; USD 120.000 - 180.000; Jornada completa

Descripción de la vacante

DataArt ищет инженера по данным для разработки и поддержки современного облачного data-платформенного ядра. Вы будете проектировать конвейеры на Azure и Snowflake, оптимизировать процессы ETL/ELT и обеспечивать качество данных в крупных корпоративных средах.

Кандидат имеет прочный опыт работы с SQL, моделированием данных и архитектурой хранилищ, умеет работать над производительностью и интеграциями BI. Роль предполагает тесное взаимодействие с командами BI и аналитикой.

Formación

• 7+ лет работы в разработке ПО.
• 5+ лет в системах с большим объемом данных.
• 2+ года опыта работы с облачными платформами (Azure предпочтительно).
• Глубокое владение SQL, моделирование данных и ETL/ELT.
• Опыт построения пакетных и микро-пакетных конвейеров.
• Опыт Snowflake не менее 1 года.
• Знания Python/Databricks приветствуются.
• Навыки работы в BI и построения архитектуры платформы.

Responsabilidades

• Проектирование, разработка и поддержка масштабируемых data pipelines на Azure и Snowflake.
• Оптимизация ETL/ELT процессов для пакетной и микро-пакетной обработки.
• Работа с Azure Data Factory, Azure SQL, Storage, Functions.
• Проектирование моделей хранилища данных: факты, измерения, схемы звезды и снежинки.
• Соблюдение качества данных и согласованности между источниками.
• Сотрудничество с BI командами для поддержки дашбордов и отчетности.
• Участие в сборе требований и дизайне решений.
• Участие в архитектуре платформы данных, вопросы производительности и инфраструктуры.
• Устранение проблем и повышение надежности системы.

Conocimientos

SQL-экспертиза

Data modeling

ETL/ELT

Big data знание

Analytical thinking

Herramientas

Azure Data Factory

Azure SQL

Snowflake

Azure Storage

Azure Functions

Python

Databricks

Descripción del empleo

Описание

The team is building a modern, cloud-based data platform that enables data-driven decision-making across all lines of business and supports analytics, reporting, and business intelligence initiatives.

Задачи

• Design, build, and maintain scalable data pipelines using Azure and Snowflake
• Develop and optimize ETL/ELT processes for batch and micro-batch workloads
• Work with Azure Data Factory, Azure SQL, Azure Storage, and Azure Functions
• Design and maintain data warehouse models, including dimensions, facts, and star and snowflake schemas
• Apply Kimball and Inmon data warehousing methodologies
• Write, optimize, and maintain complex SQL queries for analytics and reporting
• Ensure data quality, consistency, and reconciliation across multiple data sources
• Collaborate with Business Intelligence teams to support dashboards and reporting tools
• Participate in technical requirements gathering and solution design discussions
• Contribute to data platform architecture, including performance and infrastructure considerations
• Troubleshoot issues and continuously improve system performance and reliability

Требования

• 7+ Years of experience in software development
• 5+ Years of experience working with data-intensive systems
• At least 2 years of hands-on experience with cloud-based data platforms; Azure preferred
• Hands-on experience with Azure Data Factory, Azure SQL, Azure Storage, and Azure Functions
• Strong SQL expertise, including data modeling and complex ETL-based SQL development
• Experience building periodic and micro-batch pipelines
• Understanding of data warehouse architecture and data loading strategies
• At least 1 year of hands-on experience with Snowflake
• Strong analytical and problem-solving skills focused on data quality
• Experience working with large datasets in enterprise environments
• Будет плюсом: Advanced Snowflake experience in performance tuning, optimization, and cost management; proficiency in Python and/or Databricks; experience designing end-to-end data platform architectures; previous experience supporting enterprise BI platforms; exposure to CI/CD pipelines and infrastructure-as-code concepts

Условия

Armenia, Bulgaria, Cyprus, Georgia, Kazakhstan, Latvia, Poland, Romania, Serbia, and Ukraine