Data Engineer: Databricks & AWS Pipeline Expert

HireHi; United States; Remote; USD 110,000 - 160,000; Full time

Job summary

HireHi ищет инженера по данным для разработки и поддержки конвейеров данных в Databricks Lakehouse и Medallion Architecture. Вы будете работать над централизацией данных и интеграцией между внутренними системами, а также взаимодействовать с сервисами AWS.

Требуется 2–3 года опыта в Data Engineering, практический опыт Databricks и AWS, знание ERD и SQL, умение тестировать пайплайны и аналитический подход. Приветствуются знания Amazon Connect, Contact Lens или Bedrock.

Qualifications

• 2–3 года опыта в Data Engineering.
• Практический опыт Databricks и AWS.
• Понимание моделирования данных, ERD и SQL.
• Умение самостоятельно тестировать пайплайны и устранять проблемы.
• Сильные аналитические и проблемы-решающие навыки.
• Желателен опыт с Amazon Connect, Contact Lens или Bedrock.

Responsibilities

• Разработка и поддержка конвейеров данных в Databricks Lakehouse / Medallion Architecture.
• Поддержка централизации данных и интеграции между системами.
• Работа с AWS-сервисами, включая S3, Amazon Connect, Contact Lens и Bedrock.
• Понимание ERD и базовых концепций моделирования данных, включая гранularity и кардинальность соединений.
• Проведение модульного тестирования и валидация разработок перед развёртыванием.

Skills

Data engineering

Data modeling

SQL

Unit testing

Analytical thinking

Troubleshooting

Tools

Databricks

AWS

Amazon Connect

Contact Lens

Bedrock

Job description

HireHi ищет инженера по данным для разработки и поддержки конвейеров данных в Databricks Lakehouse и Medallion Architecture. Вы будете работать над централизацией данных и интеграцией между внутренними системами, а также взаимодействовать с сервисами AWS.

Требуется 2–3 года опыта в Data Engineering, практический опыт Databricks и AWS, знание ERD и SQL, умение тестировать пайплайны и аналитический подход. Приветствуются знания Amazon Connect, Contact Lens или Bedrock.