data-инженер в финтех

Live Typing, Inc.; United States; Remote; USD 110,000 - 190,000; Full time

Job summary

Компания Live Typing ищет Data-инженера для работы над многопроектными задачами: высоконагруженные финтех-системы, Data-платформы и аналитика. Требуется опыт проектирования end-to-end процессов в хранилищах и витринах данных, умение писать качественный код и работать с SQL на продвинутом уровне.

Основное — создание и поддержка сложных data-пайплайнов, обеспечение качества данных, внедрение мониторинга. Готовы рассмотреть гибкий график и удаленный формат сотрудничества на проектах.

Qualifications

• Опыт проектирования и разработки end-to-end процессов в хранилище и витрины.
• Умение писать чистый, поддерживаемый код обработки данных.
• Уверенное владение SQL и оптимизацией сложных запросов.
• Опыт работы с PostgreSQL, Greenplum и другими СУБД.
• Опыт работы с Apache Spark и экосистемой Hadoop.

Skills

Data-инженерное решение

End-to-end пайплайны

SQL

Python

PostgreSQL

Spark

Hadoop

Data Vault

DWH

Обеспечение качества данных

Education

Высшее образование в ИТ

Tools

PostgreSQL

Greenplum

Apache Spark

Hadoop (HDFS, Hive, YARN)

Parquet

Docker

Kubernetes

Kafka

Trino

MLFlow

DVC

Job description

Описание: Привет! Мы - компания Лайв Тайпинг. Уже более 15 лет создаем мобильные приложения и веб-сервисы для наших клиентов. Мы сотрудничали с такими известными брендами, как Sephora, ИЛЬ ДЭ БОТЭ, PepsiCo, Samsung, Mastercard. Входим в топ-20 лучших мобильных разработчиков России. Мы ищем Data-инженера для работы на разнообразных проектах - от высоконагруженных финтех-систем до Data-платформ. Если ты хочешь применять и расширять свою экспертизу в разных областях, тебе к нам.

Требования:

• У тебя есть опыт работы Data-инженером от 5 летТы имеешь опыт проектирования и разработки end-to-end процессов в хранилище и витрины и использовали любой из оркестратор данныхЗнаешь что такое DWH, Data Lake, Data Vault и имеешь опыт реализации различных слоёв данныхТы владеешь одним из языков программирования - пишешь чистый, поддерживаемый код для обработки данных и пайплайновТы пишешь и оптимизируешь сложные SQL запросы, работаешь с PostgreSQL, Greenplum и другими СУБДТы имеешь опыт работы с Apache SparkТы знаком с экосистемой Hadoop - знаешь что такое HDFS, Hive, YARN, ParquetТы умеешь обеспечивать качество данных - настраиваешь проверки, валидацию и мониторингБудет плюсом: Опыт работы с контейнеризацией и оркестрацией: Docker, Kubernetes (Helm); Знание стриминговых и распределённых технологий: Kafka, Trino; Опыт интеграции с ML/LLM: знакомство с MLOps-инструментами (MLFlow, DVC), LangChain; Опыт работы с другими СУБД и инструментами: Teradata, Oracle, ClickHouse, SAS, Apache NiFi; Бэкграунд в DevOps / администрировании: Linux CLI, Bash, мониторинг (Grafana, Zabbix), автоматизация (Ansible)

Условия:

• Гибкий график и работа на удаленкеМы берем на себя все заботы по поиску проекта, общения с заказчиком и оплатеВозможность взять следующий проект, если нам понравится сотрудничать друг с другомЗаботливо сопровождаем твою работу на проекте на всех этапах