Senior Data Engineer, ML Platform & Real-Time Infra Remote

Adikteev; United States; Remote; USD 90,000 - 101,000; Full time

Benefits offered by this job

Healthcare plan with excellent covera

Flexible remote working policy

Lunch vouchers

Longevity bonus every 2 years

Team-life events

Mental Health support

4 1/2 days work week

Parental leave policy

Job summary

Adikteev ищет старшего инженера по данным, который возьмет на себя владение его ML-платформой и архитектуру инфраструктуры. Вы будете проектировать, разворачивать и улучшать предиктивные модели, обеспечивая масштабируемость и высокую производительность систем Adikteev.

Требуется опыт работы с Spark, Airflow, Python/Java, и понимание MLOps. Гибкая удаленная работа, конкурентная зарплата и пакет вознаграждений.

Qualifications

• Опыт Data Engineer с фокусом на MLOps и продакшн-задачи (низкая задержка, высокая пропускная способность).
• Опыт работы с Apache Spark и Airflow для оркестрации DAG.
• Умение превращать исходные данные в качественные фичи для ML.

Responsibilities

• Проектировать, масштабировать и поддерживать инфраструктуру данных для real-time и пакетных ML рабочих потоков.
• Обеспечивать доступность данных: обработку, хранение, агрегацию и API-разработку.
• Интегрировать тестирование, мониторинг, оповещения и восстановление после сбоев.
• Разрабатывать центр признаков (feature store) и пайплайны feature engineering.
• Строить масштабируемые пайплайны с Apache Airflow и Apache Spark и оптимизировать стоимость.
• Вносить инновации, исследовать идеи из академических работ и переводить их в продакшн.
• Использовать инструменты AI-кодинга для ускорения разработки и поддерживать качество данных.

Skills

Apache Spark

Airflow

Python

Java/Scala

MLOps

Tools

AWS

Kubernetes

Kafka

Job description

Adikteev ищет старшего инженера по данным, который возьмет на себя владение его ML-платформой и архитектуру инфраструктуры. Вы будете проектировать, разворачивать и улучшать предиктивные модели, обеспечивая масштабируемость и высокую производительность систем Adikteev.

Требуется опыт работы с Spark, Airflow, Python/Java, и понимание MLOps. Гибкая удаленная работа, конкурентная зарплата и пакет вознаграждений.