Data Engineer, Large-Scale Data Platforms (Remote)
HireHi
Stand out for this role — generate a tailored resume and cover letter in about a minute.
Job summary
Intellias ищет инженера по данным с опытом разработки пакетных и потоковых пайплайнов на Scala и Spark. Участвует в создании и поддержке Kafka‑решений, Airflow‑DAGs и схем данных; обеспечивает мониторинг и поддержку продакшна.
Кандидат должен владеть SQL/ETL, тестированием и CI/CD, демонстрировать ответственность и умение работать в команде с инженерами и потребителями данных. Удаленная работа доступна для ряда стран.
Qualifications
- 3+ года опыта в Data Engineering.
- Работа с Scala и Apache Spark.
- Опыт пакетной обработки и распределённых систем.
- Опыт Kafka/Kafka Streams, Flink или аналогичных технологий.
- Опыт Apache Airflow.
- Знание моделирования данных, SQL и ETL/ELT.
- Опыт тестирования, ревью кода, систем контроля версий и CI/CD.
- Сильные навыки устранения неполадок и поддержки в продакшн.
- Хорошие коммуникационные навыки и ответственность.
- Желательно: Flink, NoSQL (Cassandra, DynamoDB, ScyllaDB) и данные о клиентах/клик‑потоках/AI-инструменты.
Responsibilities
- Разработка и сопровождение пакетных и потоковых пайплайнов.
- Поддержка решений на Kafka.
- Создание и поддержка DAG в Airflow.
- Моделирование данных, сопоставление схем и валидация.
- Мониторинг работ пайплайнов и устранение production issues.
- Рецензирование AI‑сгенерированного кода.
- Сотрудничество с командами инженеров и data consumers.
Skills
Tools
Job description
Intellias ищет инженера по данным с опытом разработки пакетных и потоковых пайплайнов на Scala и Spark. Участвует в создании и поддержке Kafka‑решений, Airflow‑DAGs и схем данных; обеспечивает мониторинг и поддержку продакшна.
Кандидат должен владеть SQL/ETL, тестированием и CI/CD, демонстрировать ответственность и умение работать в команде с инженерами и потребителями данных. Удаленная работа доступна для ряда стран.
'/%3e%3cpath%20d='M101.744%2012.4726L102.894%2016.1947L99.0021%2013.2201L101.744%2012.4726ZM105.3%208.40937H100.488L99.0026%203.59473L97.5116%208.41047L92.7%208.40385L96.5965%2011.3834L95.1055%2016.1942L99.0021%2013.2196L101.408%2011.3834L105.3%208.40992V8.40937Z'%20fill='white'/%3e%3cdefs%3e%3clinearGradient%20id='paint0_linear_5593_1381'%20x1='90'%20y1='9.44471'%20x2='99'%20y2='9.44471'%20gradientUnits='userSpaceOnUse'%3e%3cstop%20stop-color='%2300AD70'/%3e%3cstop%20offset='0.998594'%20stop-color='%2300B67A'/%3e%3cstop%20offset='1'%20stop-color='%23DCDCE6'/%3e%3c/linearGradient%3e%3c/defs%3e%3c/svg%3e){kind=small}
