Data engineer

Astek Group; United States; Hybrid; USD 39,000 - 51,000; Full time

Benefits offered by this job

Remote work possible

Visits to Warsaw office

Long-term cooperation

Technical training and certifications

Mentoring

Career development path

Community/CC events participation

Job summary

Astek Group ищет опытного инженера данных для создания новой команды по разработке современной платформы данных. Проект на раннем этапе, вы сможете влиять на архитектуру, стандарты и направление решения.

В команде есть специалисты по SAS, Oracle и Microsoft Fabric; используем облачные решения Microsoft Azure. Ключевые задачи включают проектирование хранилищ данных, ETL/ELT, моделирование данных, работу с PySpark, Power BI и Azure Data Factory, а также участие в Agile/Scrum.

Qualifications

• Опыт работы от 5 лет на аналогичной позиции.
• Опыт работы с хранилищами данных и сильные знания Python.
• Продвинутые знания SQL и реляционных баз данных (Oracle – плюс).
• Практический опыт Microsoft Azure, Azure Data Factory, Azure DevOps и GitHub.
• Знание Microsoft Fabric и PySpark.
• Опыт моделирования данных и ETL-решений.
• Практические знания Power BI (моделирование данных, DAX).
• Способность решать сложные задачи в локальных и облачных средах.
• Опыт работы в Agile/Scrum.
• Коммуникационные навыки и умение сотрудничать с разными командами.
• Будет плюсом: SAS 4GL.
• Будет плюсом: Проекты в финансовой отрасли.

Responsibilities

• Проектирование и разработка хранилищ данных и ETL/ELT процессов.
• Создание решений на базе Microsoft Fabric, Azure Data Factory и PySpark.
• Моделирование данных (факты, размерности, звезды).
• Разработка и оптимизация решений с использованием Python и SQL.
• Интеграция данных из разных источников в локальной и облачной среде.
• Сотрудничество с техническими командами по дизайну архитектуры данных.
• Создание моделей и отчетности в Power BI.
• Участие в работе по Agile/Scrum.

Skills

Python

SQL

Azure

Power BI

ETL/ELT

Data Modeling

Azure DevOps

GitHub

PySpark

SAS 4GL

Tools

Azure Data Factory

Microsoft Fabric

Azure DevOps

GitHub

PySpark

Job description

Описание:

We are looking for an experienced Data Engineer to join a newly formed team responsible for developing a modern data platform. The project is at an early stage, giving you a real influence on the architecture, standards and direction of the solution. The team currently includes specialists in SAS, Oracle and Microsoft Fabric, and the technological environment is based on modern Microsoft Azure cloud solutions.

Задачи:

• Designing and developing data warehouses and ETL/ELT processes
• Creating and developing solutions based on Microsoft Fabric, Azure Data Factory and PySpark
• Data modeling (facts, dimensions, star schemas)
• Developing and optimizing solutions using Python and SQL
• Integrating data from multiple sources in on-premise and cloud environments
• Collaborating with technical teams on data architecture design
• Creating models and developing reporting in Power BI
• Participating in work carried out according to Agile/Scrum methodologies

Требования:

• At least 5 years of experience in a similar role
• Experience working with data warehouses and very good knowledge of Python
• Advanced knowledge of SQL and relational databases (Oracle is a plus)
• Practical experience with Microsoft Azure, Azure Data Factory, Azure DevOps and GitHub
• Knowledge of Microsoft Fabric and PySpark
• Experience in data modeling and working with ETL solutions
• Practical knowledge of Power BI (data modeling, DAX)
• Ability to solve complex problems in on-premise and cloud environments
• Experience working in Agile/Scrum
• Communication skills and the ability to collaborate with different teams
• Будет плюсом: Experience with SAS Institute technologies (SAS 4GL)
• Будет плюсом: Projects in the financial industry

Условия:

• Remote work is possible; visits to the Warsaw office are welcome
• PLN 950/day, B2B
• Long-term cooperation
• Technical training, certifications and professional development
• Mentoring
• Competence Center — being a member of the CC community from your first day at work is an opportunity to develop your skills, attend various conferences and share knowledge and experience with people who face the same challenges every day
• A clear career path
• Employee benefits package (Multisport, private medical care, life insurance)
• A friendly working atmosphere, integration events and team-building meetings
• A referral system