Senior Data Engineer - PySpark, Datalake & Analytics

Enfint; Porto; Presencial; EUR 20 000 - 35 000; Tempo integral

Vantagens oferecidas por esta oferta de emprego

Meal allowance

Health insurance

Resumo da oferta

Enfint приглашает к вакансии специалиста по данным для разработки и поддержки Datalake в рамках международной команды. Требуется опыт работы с Python и PySpark, знание Big Data и SQL, а также владение DevOps-инструментами.

Вы будете сотрудничать с бизнес-аналитиками и разработчиками, участвовать в архитектурных обсуждениях и обеспечивать высокую доступность и производительность дата-решений. Ожидается готовность к командировкам и владение английским на уровне не ниже B2.

Qualificações

• 4+ года опыта в BigData и NoSQL технологиях (Hadoop, HDFS, Hive, Kerberos, Starburst).
• Опыт работы с Visual Studio Code или аналогичными средами разработки.
• Опыт Python и PySpark.
• Знание норм моделирования данных и SQL.
• Опыт DevOps (Git, Jenkins, XL Deploy, XL Release).
• Уровень английского не ниже B2.
• Аналитический склад ума и способность выявлять паттерны и тренды.
• Опыт работы по Agile (Scrum/Kanban).
• Способность работать в международной распределённой команде.
• Готовность к кратковременным командировкам за рубеж.

Responsabilidades

• Разработка пайплайнов Datalake с использованием Python и PySpark.
• Анализ требований и проектирование архитектурных решений для Datalake.
• Сбор и управление требованиями к приложениям в Agile среде.
• Реализация сценариев использования от простых до сложных.
• Содействие эффективности и автоматизации процессов.
• Поддержка бизнес-пользователей, аналитиков и разработчиков в доставке дата-ориентированных решений.
• Участие в локальных инициативах и проектах от оценки до внедрения и индустриализации.
• Предложение улучшений существующих процессов, особенно с точки зрения производительности.

Conhecimentos

Big Data

PySpark

Python

SQL

DevOps

English B2

Agile

Distributed team

Ferramentas

Visual Studio Code

Git

Jenkins

XL Deploy

XL Release

PowerBI

SharePoint Online

Dataverse

Descrição da oferta de emprego

Enfint приглашает к вакансии специалиста по данным для разработки и поддержки Datalake в рамках международной команды. Требуется опыт работы с Python и PySpark, знание Big Data и SQL, а также владение DevOps-инструментами.

Вы будете сотрудничать с бизнес-аналитиками и разработчиками, участвовать в архитектурных обсуждениях и обеспечивать высокую доступность и производительность дата-решений. Ожидается готовность к командировкам и владение английским на уровне не ниже B2.