data engineer in audience measurement

HireHi; United States; Remote; USD 120,000 - 180,000; Full time

Benefits offered by this job

Медицинская страховка

Возможность релокации в Польшу

Профессиональное развитие

Компенсация сертификаций (AWS, PMP)

Рекомендационная программа

Job summary

Andersen — глобальный поставщик технологий, предоставляющий аналитку данных и AI‑решения для понимания поведения клиентов и оптимизации маркетинга. Ваша роль — ведущий Data Engineer в команде отчетности, ответственен за качество данных, пайплайны и сотрудничество с партнерами.

Требуется 3+ года опыта в Data Engineering, опыт работы с AWS/Databricks, глубокие SQL‑навыки и умение писать производственный Python. Реализация DAG в Airflow и работа с GCP приветствуются.

Qualifications

• 3+ года опыта Data Engineer в продакшн-окружении.
• Опыт работы с AWS или Databricks.
• Сильные SQL-навыки (BigQuery / PostgreSQL) в продакшне.
• Производственный Python.
• Опыт написания DAG в Apache Airflow.
• Опыт распределённых обработок и оркестрации.
• Опыт API-first сервисов и стриминговых/Event-driven систем.
• Степень бакалавра по CS/SE или эквивалентный опыт.

Responsibilities

• Становиться основным contact-point для Data Engineer по отчетам: доступность данных, расхождения метрик и поведение пайплайнов.
• Написание и выполнение SQL-запросов в BigQuery и PostgreSQL для проверки отчетов и выявления аномалий.
• Воспроизведение и документирование проблем с данными, координация с командой Data Engineering.
• Поддержка запросов на произвольные выборки данных и валидацию в рамках продуктов отчетности.
• Настройка и конфигурация облачных сред для доставки данных партнёрами: AWS S3, IAM, SFTP.
• Разработка и поддержка Airflow DAGs на Python для оркестрации ingestion.
• Координация с внешними партнёрами по спецификациям форматов файлов и графикам поставки.
• Проведение тестов соответствия для верификации identity в пайплайнах.

Skills

Опыт Data Engineer

SQL (BigQuery / PostgreSQL)

Python (production-grade)

Airflow

AWS / Databricks

GCP

API/Streaming архитектуры

Английский (Upper-Intermediate+)

Education

Бакалавр в CS/SE или смежной области

Tools

AWS

Databricks

GCP

BigQuery

PostgreSQL

Airflow

Job description

Описание:

Andersen is a global technology provider delivering data analytics and AI-powered solutions that help organizations understand customer behavior, optimize marketing performance, and make informed business decisions. The company develops data-driven audience measurement and advertising analytics solutions using connected-device and media consumption data.

Задачи:

• Serve as the primary Data Engineer point of contact for report-related questions, including data availability, metric discrepancies, and pipeline behavior
• Write and execute SQL queries in BigQuery and PostgreSQL to validate report outputs, isolate data anomalies, and confirm fixes
• Reproduce and document data issues and coordinate with the core Data Engineering team on resolution
• Support ad hoc data pulls and validation requests related to reporting products
• Set up and configure cloud environments for partner data delivery, including AWS S3 buckets, IAM policies, and SFTP endpoints
• Write and maintain Airflow DAGs in Python to orchestrate ingestion workflows, including scheduling, alerting, and dependency management
• Coordinate with external partners on file format specifications, delivery schedules, and test dataset requests
• Execute match tests to validate identity resolution across ingestion pipelines
• Identify and flag data quality issues in partner files before they reach production pipelines

Требования:

• 3+ Years of experience as a Data Engineer
• Hands-on production experience with AWS or Databricks
• Strong SQL skills with BigQuery and/or PostgreSQL, including complex analytical queries in production
• Production-quality Python skills
• Experience authoring Apache Airflow DAGs
• Experience with distributed processing in production and workflow orchestration
• Experience with API-first services and streaming or event-driven systems
• Bachelor’s degree in Computer Science, Software Engineering, or a related technical field, or equivalent experience
• Upper-Intermediate English or higher
• Nice to have: background in ad tech, audience measurement, CTV/OTT, ACR, or programmatic data flows
• hands-on production experience with GCP

Условия:

• Additional earnings of up to 1,000 USD per month depending on expertise, included in the annual bonus through participation in company activities
• Professional, financial, and career growth opportunities
• Mentoring and onboarding systems for each new employee
• Access to the corporate training portal
• Certification compensation, including AWS and PMP
• Private health insurance and sports activity compensation
• Referral program
• Relocation and office options are available in Poland