Data Engineer - Fintech Data Pipelines & Cloud Infra

HireHi; United States; Remote; USD 120,000 - 180,000; Full time

Benefits offered by this job

Competitive salary

Collaborative culture

High-impact role in fintech

Social benefits

Job summary

HireHi ищет Data Engineer для разработки и поддержки конвейеров обработки данных в fintech-секторе. Ваша задача — интегрировать данные, строить и поддерживать ETL/ELT пайплайны и data lake, а также проектировать базы данных и инфраструктуру данных.

Требуется опыт работы с Spark, Kafka, Airflow, Docker и AWS, знание Python и SQL. Компания предлагает конкурентную оплату и прозрачную командную культуру, возможность влиять на масштабирование финтех-решений и работу в кросс-функциональных командах.

Qualifications

• Сильные навыки Python и продвинутый SQL.
• Практический опыт проектирования и поддержки масштабируемых пайплайнов данных.
• Опыт ETL/ELT процессов, включая ingestion, transformation и orchestration.
• Опыт работы с Apache Spark на больших данных.
• Опыт с Apache Kafka и потоковыми пайплайнами.
• Навыки проектирования баз данных и оптимизации производительности.
• Опыт AWS и облачной инфраструктуры данных.
• Опыт Apache Airflow для управления рабочими процессами.
• Опыт Docker и контейнеризации.
• Знания Git и современных рабочих процессов разработки.
• Понимание архитектуры данных и принципов качества данных.

Responsibilities

• Интегрировать данные из разных источников в внутренние системы.
• Разрабатывать, оптимизировать и поддерживать ETL пайплайны и процессы загрузки данных.
• Владеть, поддерживать и документировать data lake
• Преобразовывать сложные структуры данных в машины-читаемые форматы
• Разрабатывать и поддерживать базы данных и инфраструктуру данных
• Сотрудничать с другими отделами для проверки релевантности и качества данных
• Идентифицировать пути повышения надежности и эффективности существующих процессов

Skills

Python

SQL

ETL/ELT

Apache Spark

Apache Kafka

Airflow

Docker

Git

AWS

Data modeling

Data architecture

Tools

Apache Spark

Apache Kafka

Apache Airflow

Docker

Git

AWS

Job description

HireHi ищет Data Engineer для разработки и поддержки конвейеров обработки данных в fintech-секторе. Ваша задача — интегрировать данные, строить и поддерживать ETL/ELT пайплайны и data lake, а также проектировать базы данных и инфраструктуру данных.

Требуется опыт работы с Spark, Kafka, Airflow, Docker и AWS, знание Python и SQL. Компания предлагает конкурентную оплату и прозрачную командную культуру, возможность влиять на масштабирование финтех-решений и работу в кросс-функциональных командах.