Data engineer

Baxter Planning Systems, Inc.; United States; On-site; USD 110,000 - 160,000; Full time

Benefits offered by this job

Здравоохранение

Гибкая система оплаты и льготы

Командные мероприятия

Чай/кофе и бесплатные закуски

Job summary

Baxter Planning Systems, Inc. ищет Data Engineer для разработки и эволюции data lake на AWS, поддержки аналитики и продуктовых данных. Ваша работа будет включать проектирование и эксплуатацию конвейеров данных и подготовку наборов данных для BI.

Кандидат будет работать над моделированием данных, качеством данных и приближенной к реальному времени загрузкой, сотрудничать с инженерами и стейкхолдерами, участвовать в архитектуре, автоматизации и лучших практиках.

Qualifications

• 4+ года разработки и эксплуатации production data pipelines
• Сильные навыки Python
• Опыт работы с AWS на уровне сервисов S3, Glue, Athena, Redshift, DMS, Lambda и др.
• Опыт работы с моделированием данных и схемой звезды
• Опыт по качеству данных и observability
• Опыт работы с Airflow и инструментами CI/CD/IaC
• Опыт работы с lakehouse (Delta) и обновлениями схем
• Умение работать с SQL/BI-ready данными

Responsibilities

• Построение слоя данных: curated datasets, marts, таблицы готовые для продукта
• Разработка incremental/micro-batch pipelines, поддержка CDC near-real-time ingestion (AWS DMS)
• Проектирование BI-дружелюбных моделей данных (звездная схема) и управление схемами
• Разработка ETL/ELT на Python (Polars) и доступ к данным через Athena/Redshift
• Обеспечение качества и наблюдаемости данных (свежесть, полнота, дубликаты, Drift)
• Оркестрация с Airflow и AWS-native инструментами (Step Functions)
• Участие в CI/CD, IaC, архитектурных обсуждениях и лучших практиках

Job description

Описание

As a Data Engineer at Baxter Planning you will play a key role in building and evolving our data lake platform, supporting analytics and data-driven products across the business. You will design and operate reliable, production-grade data pipelines and curated datasets using modern AWS services and Python. This role focuses on data modeling, data quality, and near-real-time ingestion to ensure trustworthy, BI-ready data. You will work closely with engineers and stakeholders while contributing to architecture, automation, and best practices.

Задачи

• Build the data-serving layer: curated datasets, marts, and product-ready tables
• Develop incremental / micro-batch pipelines and support CDC near-real-time ingestion (AWS DMS)
• Design BI-friendly data models (star schema) and manage schemas
• Build ETL/ELT in Python (Polars) and serve/query via Athena and/or Redshift
• Implement data quality + observability (freshness, completeness, duplicates, schema drift, anomalies)
• Orchestrate with Airflow and AWS-native tools (e.g., Step Functions)
• Contribute to CI/CD, IaC, architecture discussions, and best practices

Требования

• 4+ years building and operating production data pipelines
• Strong Python
• Strong AWS across services like: S3, Glue, Athena, Redshift, Lake Formation, CloudWatch, DMS, Lambda, Step Functions, SQS/SNS, ECS, DynamoDB (+ CloudFormation)
• Experience with lakehouse tables (Delta or similar), schema evolution, partitioning, compaction, upserts/merge
• Solid data modeling skills (star schema) and commitment to testing & data quality
• Experience running AWS DMS in production (monitoring/troubleshooting)
• Будет плюсом: async/concurrency is a plus

Условия

• A competitive salary (€ 55000 - € 65000)
• Work in a friendly and diverse team private health insurance gym membership learning opportunities flexible benefits team events free office snacks and drinks