Cloud Data Engineer: Scalable ETL & AI-Driven Insights

Enfint; Województwo pomorskie; On-site; PLN 120,000 - 180,000; Full time

Benefits offered by this job

Private medical care (LuxMed)

MyBenefit cafeteria credits

Multisport membership

Glasses reimbursement

Referral bonuses

R&D AI track

Licenses for AI tools

Job summary

Vention приглашает опытного инженера данных к сотрудничеству в глобальной команде для разработки и поддержки масштабируемых ETL/ELT пайплайнов в облаке. Ваша задача — интегрировать разнообразные датасеты и обеспечивать качество данных для аналитики и машинного обучения.

Вы будете проектировать облачные архитектуры, работать с кросс-функциональными командами и создавать дашборды и отчеты для выявления трендов и поддержки управленческих решений.

Qualifications

• 2+ года опыта в Data Engineering.
• Сильный опыт Python и SQL.
• Глубокие знания Spark/PySpark для распределенной обработки.
• Опыт работы с AWS (Glue, S3, Lambda) или Azure Databricks (Delta Lake, ADLS Gen2, Key Vault, DevOps).
• Опыт работы в Agile (Scrum или Kanban).
• Уровень английского B2+; опыт общения с англоязычными заказчиками.

Responsibilities

• Строить, оптимизировать и поддерживать масштабируемые ETL/ELT пайплайны в облаке.
• Интеграция и управление разнообразными наборами данных для аналитики и ML.
• Проектирование и поддержка облачных архитектур для высокої пропускной способности.

Skills

Python

SQL

Spark/PySpark

AWS

Azure Databricks

Scrum/Kanban

English communication

Tools

Kafka

Flink

Kubernetes

Terraform

Job description

Vention приглашает опытного инженера данных к сотрудничеству в глобальной команде для разработки и поддержки масштабируемых ETL/ELT пайплайнов в облаке. Ваша задача — интегрировать разнообразные датасеты и обеспечивать качество данных для аналитики и машинного обучения.

Вы будете проектировать облачные архитектуры, работать с кросс-функциональными командами и создавать дашборды и отчеты для выявления трендов и поддержки управленческих решений.