Data engineer

Cloudfide; United States; À distance; USD 120 000 - 180 000; Plein temps

Avantages offerts par ce poste

E-learning budget

Ownership opportunities

Remote-first culture

Résumé du poste

Cloudfide ищет специалиста по Data Engineering для проектирования и реализации масштабируемых конвейеров данных в облачных средах и поддержки архитектуры платформы. Роль включает взаимодействие с клиентами, стейкхолдерами и командами разработки, а также внедрение лучших практик качества данных, автоматизации и наблюдаемости.

Требуются 4+ года опыта в области данных, сильные навыки Python и SQL, а также знание Azure.

Qualifications

• 4+ лет практического опыта в Data Engineer или близкой роли.
• 2+ года работы с облачными платформами — Azure предпочтительно, AWS/GCP ценятся.
• Сильные навыки Python — писать поддерживаемый код в распределённых окружениях.
• Продвинутый SQL и опыт работы с реляционными БД (SQL Server, PostgreSQL и пр.).
• Экспертиза в моделировании DWH, ETL/ELT и современных паттернах проектирования данных.
• Понимание архитектуры облаков, сетевых основ, безопасности, API и масштабируемых систем.
• Опыт работы с большими объёмами данных.
• Ответственный подход, креативность и стремление к инновациям.

Responsabilités

• Проектирование и внедрение масштабируемых конвейеров данных и моделей.
• Родство технического дизайна облачных архитектур данных и участие в стандартах платформы.
• Продвижение практик качества, отслеживаемости данных, observability, тестирования, автоматизации и документации.
• Оптимизация рабочих процессов данных по производительности, стоимости и надёжности.
• Сотрудничество с клиентами и стейкхолдерами для понимания требований и коммуникации решений.
• Работа через CI/CD, IaC и DataOps для развёртываний и операций.
• Интеграция решений с BI, ML и слоями приложений в разных средах.
• Менторство среднего уровня инженеров и поддержка их развития.
• Следование за новыми технологиями и предложение инноваций для платформы.

Connaissances

Python

SQL

Data modeling

ETL/ELT

Azure

Cloud platforms

Big data

Automation

Outils

Databricks

Apache Spark

PySpark

Airflow

Terraform

Azure DevOps / GitHub Actions

Description du poste

Задачи:

• Designing and implementing scalable, production-grade data pipelines, data models, and data processing frameworks in cloud environments.
• Leading the technical design of cloud data architectures, contributing to standards, guidelines, and long-term platform strategy.
• Driving best practices in data engineering: quality assurance, lineage, observability, testing, automation, documentation.
• Optimizing data workflows for performance, cost efficiency, and reliability across distributed systems.
• Collaborating closely with clients and senior stakeholders to understand requirements, propose solutions, and communicate technical decisions.
• Working with CI/CD pipelines, infrastructure-as-code, and automation (DataOps) to streamline deployments and operations.
• Integrating data solutions with BI, ML, and application layers across diverse client environments.
• Mentoring mid-level engineers, supporting them in technical growth (without formal line management).
• Staying up-to-date with emerging technologies and proposing innovations to enhance platform capabilities.

Требования:

• 4+ years of hands-on experience as a Data Engineer or in a closely related engineering role.
• 2+ years experience working with cloud platforms - we operate primarily in Azure, but AWS/GCP experience is equally valuable.
• Strong Python skills - ability to write maintainable, production-ready code in distributed data environments.
• Advanced SQL proficiency and experience with relational databases (SQL Server, PostgreSQL, etc.).
• Expertise in DWH data modeling, ETL/ELT architectures, and modern data design patterns (Lakehouse preferred).
• Solid understanding of cloud architecture, networking fundamentals, security, APIs, and scalable systems.
• Experience working with large-scale, high-volume datasets.
• Strong ownership mindset, creativity, and openness to innovation.
• Ability to operate autonomously and drive initiatives in dynamic, evolving cloud projects.

Будет плюсом:

• Experience with Databricks, Apache Spark, PySpark (big advantage)
• Hands-on knowledge of Apache Airflow or other orchestration tools
• Experience with Azure DevOps or GitHub Actions for CI/CD
• Familiarity with infrastructure as code (Terraform/Bicep)
• Exposure to AI/ML pipelines or MLOps environments

Условия:

• Access to top e-learning platforms and development budget
• Real ownership opportunities - expand your scope, drive solutions, lead initiatives
• most of our Leads are promoted internally
• Long-term collaboration via B2B - we value lasting partnerships
• Remote-first
• Flexible hours
• Work alongside exceptional engineers and experts
• Flat structure where every person matters and influences the company
• Full-company integration trips (including international ones)
• Team-level integration budgets
• Open, supportive, and collaborative culture