Data Engineer

Enfint; Porto; Presencial; EUR 20 000 - 35 000; Tempo integral

Vantagens oferecidas por esta oferta de emprego

Meal allowance

Health insurance

Resumo da oferta

Enfint приглашает к вакансии специалиста по данным для разработки и поддержки Datalake в рамках международной команды. Требуется опыт работы с Python и PySpark, знание Big Data и SQL, а также владение DevOps-инструментами.

Вы будете сотрудничать с бизнес-аналитиками и разработчиками, участвовать в архитектурных обсуждениях и обеспечивать высокую доступность и производительность дата-решений. Ожидается готовность к командировкам и владение английским на уровне не ниже B2.

Qualificações

• 4+ года опыта в BigData и NoSQL технологиях (Hadoop, HDFS, Hive, Kerberos, Starburst).
• Опыт работы с Visual Studio Code или аналогичными средами разработки.
• Опыт Python и PySpark.
• Знание норм моделирования данных и SQL.
• Опыт DevOps (Git, Jenkins, XL Deploy, XL Release).
• Уровень английского не ниже B2.
• Аналитический склад ума и способность выявлять паттерны и тренды.
• Опыт работы по Agile (Scrum/Kanban).
• Способность работать в международной распределённой команде.
• Готовность к кратковременным командировкам за рубеж.

Responsabilidades

• Разработка пайплайнов Datalake с использованием Python и PySpark.
• Анализ требований и проектирование архитектурных решений для Datalake.
• Сбор и управление требованиями к приложениям в Agile среде.
• Реализация сценариев использования от простых до сложных.
• Содействие эффективности и автоматизации процессов.
• Поддержка бизнес-пользователей, аналитиков и разработчиков в доставке дата-ориентированных решений.
• Участие в локальных инициативах и проектах от оценки до внедрения и индустриализации.
• Предложение улучшений существующих процессов, особенно с точки зрения производительности.

Conhecimentos

Big Data

PySpark

Python

SQL

DevOps

English B2

Agile

Distributed team

Ferramentas

Visual Studio Code

Git

Jenkins

XL Deploy

XL Release

PowerBI

SharePoint Online

Dataverse

Descrição da oferta de emprego

Описание

Match Profiler is an Information Systems consultancy with over 25 years of experience in the national and international technology market. The company develops solutions that drive business growth through innovation, trust, and security.

Задачи

• Develop Datalake pipelines using Python and PySpark;
• Analyze requirements and propose architecture solutions within the Datalake;
• Gather, document, examine, and manage application requirements in an Agile environment;
• Implement use cases ranging from basic to complex;
• Promote efficiency and automation;
• Maintain existing processes and support technical needs of other users;
• Collaborate with business users, analysts, and developers to deliver data-driven solutions;
• Contribute to local initiatives and projects from assessment and use case identification to implementation and industrialization;
• Suggest improvements for existing processes, particularly regarding performance.

Требования

• At least 4 years of professional experience in BigData and NoSQL technologies (Hadoop, HDFS, Hive, Kerberos, Starburst);
• Experience with Visual Studio Code or similar frameworks;
• Experience with Python and PySpark;
• Knowledge of data modeling principles and SQL;
• Familiarity with DevOps concepts (Git, Jenkins, XL Deploy, XL Release);
• English level B2 or higher;
• Analytical mindset with the ability to identify patterns and trends;
• Ability to communicate data insights to stakeholders;
• Experience with Agile methodologies (Scrum/Kanban);
• Ability to work in an international and distributed team;
• Availability to travel abroad for short periods;
• Nice to have: Optimization and performance improvement experience (Shell Script, Execution plan);
• Nice to have: knowledge in PowerBI, PowerApps, PowerAutomate, Microsoft Certifications (PL-100, PL-200, PL-300, PL-400, PL-500, PL-600, PL-700, PL-900, DP-X00);
• Nice to have: administration of SharePoint Online and Dataverse, experience with REST APIs, SSAS, SSIS, Azure, and proficiency in French.

Условия

• Base salary: 20 000€ – 35 000€ gross per year;
• Meal allowance of 7,50€ per day via meal card;
• Health insurance for the employee with an option to extend to family;
• Annual performance bonus based on individual and company objectives.