Senior Data Migration QA Engineer - Remote UK

HireHi; United States; Remote; USD 120,000 - 170,000; Full time

Job summary

HireHi ищет специалиста по качеству данных для проекта миграции и валидации на платформе Databricks и Microsoft Fabric. Ваша задача — обеспечить надежное тестирование, сопоставление данных и устойчивые результаты отчетности.

Требуется 5+ лет опыта в тестировании данных, знания Python и SQL, опыт работы с пайплайнами и CI/CD, владение английским. Ожидается удаленная работа с англоязычными клиентами и знания Microsoft Fabric/Sapiens и прочих фреймворков по желанию.

Qualifications

• 5+ лет в области тестирования качества данных/ETL, с упором на данные, а не на приложения
• Сильные навыки Python и SQL для построения тестовой автоматизации
• Опыт проверки конвейеров данных: подсчет строк, суммы контроля, целостность
• Опыт reconciliation source-to-target с заданными допусками
• Опыт CI/CD тестирования и внедрения quality gates
• Опыт работы с Azure Databricks и Azure DevOps
• Владение английским языком на уровне, достаточном для общения с клиентами

Responsibilities

• Разрабатывать и внедрять фреймворки тестирования данных и обеспечения качества
• Создавать автоматическую валидацию для пайплайнов и продуктов данных
• Вести reconciliation между устаревшими системами и новой платформой
• Разрабатывать регрессионные наборы тестов и запускать их без участия человека
• Писать unit-тесты, исполняющиеся в CI/CD и блокирующие релиз при нарушениях
• Обнаруживать и обрабатывать дрифты схем данных и неожиданные изменения
• Проверять отчеты, дашборды и семантические модели, включая показатели и суммы
• Применять AI-методы к тестированию и покрытию с ручной верификацией

Skills

Python

SQL

CI/CD

Azure Databricks

Azure DevOps

SQL Server

English

Tools

Databricks

Great Expectations

dbt tests

Soda

Deequ

Job description

HireHi ищет специалиста по качеству данных для проекта миграции и валидации на платформе Databricks и Microsoft Fabric. Ваша задача — обеспечить надежное тестирование, сопоставление данных и устойчивые результаты отчетности.

Требуется 5+ лет опыта в тестировании данных, знания Python и SQL, опыт работы с пайплайнами и CI/CD, владение английским. Ожидается удаленная работа с англоязычными клиентами и знания Microsoft Fabric/Sapiens и прочих фреймворков по желанию.