Data Platform Engineer: Kafka & Modeling Remote

EPAM; United States; Remote; USD 120,000 - 180,000; Full time

Job summary

EPAM ищет инженера данных для команды, которая строит единую платформу данных для портфеля нефтегазовых продуктов. Вы будете проектировать канонические и семантические модели, устанавливать контракты на интеграцию данных и обеспечивать единообразие подходов к данным.

Вы будете настраивать и администрировать кластеры Apache Kafka, заниматься безопасностью, мониторингом и observability. Опыт работы с несколькими источниками данных, SQL и Python обязателен, владение контрактами данных и

Qualifications

• Опыт проектирования канонических и семантических моделей данных.
• Знание SQL и Python для production data engineering.
• Опыт работы с Apache Kafka на продакшн-кластерах.
• Умение интегрировать данные из нескольких источников.
• Навыки документирования контрактов данных и стандартов.

Responsibilities

• Проектировать и владеть каноническими и семантическими моделями данных.
• Настраивать кластеры Apache Kafka и обеспечивать их безопасность и мониторинг.
• Интегрировать данные из разных продуктов и создавать единый доступ к ним.
• Разрабатывать и внедрять данные для аналитики, AI/ML и observability.
• Документировать контракты данных, словари и спецификации интеграций.

Skills

Apache Kafka

Data Modeling

SQL

Python

Data Integration

Data Observability

ETL Pipelines

Tools

Schema Registry

Kafka Admin Tools

Job description

EPAM ищет инженера данных для команды, которая строит единую платформу данных для портфеля нефтегазовых продуктов. Вы будете проектировать канонические и семантические модели, устанавливать контракты на интеграцию данных и обеспечивать единообразие подходов к данным.

Вы будете настраивать и администрировать кластеры Apache Kafka, заниматься безопасностью, мониторингом и observability. Опыт работы с несколькими источниками данных, SQL и Python обязателен, владение контрактами данных и