Data engineer in payments

idpp; United States; Remote; USD 161,000 - 212,000; Full time

Benefits offered by this job

Job summary

idpp ищет опытного Data Engineer для поддержки ускорения доставки NL и разработки слоя отчетности по данным в VISTA. Работа включает проектирование масштабируемых пайплайнов и аналитических наборов данных для отчетности на больших транзакционных данных.

Требуется опыт работы с GCP (BigQuery, GCS) и dbt, SQL, Python; знание моделирования данных и истории данных. Условия: 6 месяцев, оплата 900€ в день на условиях B2B.

Qualifications

• Навыки SQL и Python для разработки ELT/ETL процессов и аналитических наборов данных.
• Опыт работы с облачными сервисами Google Cloud Platform (GCP), BigQuery и GCS.
• Опыт моделирования данных, dbt, историзации и контроля качества данных.

Responsibilities

• Разрабатывать и поддерживать ELT/ETL конвейеры с Airflow/Cloud Composer и сервисами Google Cloud.
• Разрабатывать dbt-модели: трансформации, historization, тестирование и документацию.
• Поддерживать развёртывание и агрегацию данных для аналитических наборов.
• Оптимизировать аналитические наборы для отчетности и аналитики.
• Обеспечивать качество данных и надёжную поставку больших транзакционных наборов данных.

Skills

SQL

Python

Airflow

dbt

GCP

Tools

BigQuery

GCS

Cloud Composer

Airflow

Git

Job description

Описание

We are looking for an experienced Data Engineer to support the acceleration of NL delivery and the development of the Global Payments reporting data layer on VISTA. You will work on scalable data pipelines and analytical datasets, helping deliver reliable, maintainable data products for reporting and analytics across large transactional datasets.

Задачи

Design and maintain ELT/ETL pipelines using Airflow / Cloud Composer and Google Cloud services, including BigQuery and Google Cloud Storage (GCS). Develop and maintain dbt models, covering transformations, historization, testing, documentation and data quality controls. Support country onboarding, data aggregation and deployment activities. Optimize analytical datasets for reporting and analytics. Contribute to scalable, maintainable and high-quality data products for large transactional datasets.

Требования

Strong hands-on experience with Google Cloud Platform (GCP), particularly: BigQuery, GCS, Cloud Composer / Airflow Strong experience with dbt, SQL and Python. Solid knowledge of data warehousing, dimensional modelling and historization. Experience with CI/CD and Git. Proven ability to develop scalable and maintainable data products for large transactional datasets. Strong analytical and problem-solving skills, with a focus on data quality and reliable delivery. Fluent English Будет плюсом: Experience in banking, financial services or payments is highly preferred; Banking, financial services or payments experience is preferable, particularly experience working with transactional or financial data

Условия

6 months initially €900 per day via B2B contract