Engenheiro De Dados

Niteo Technologies; Niterói; Presencial; BRL 20.000 - 80.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia de dados no Rio de Janeiro procura um Engenheiro de Dados para projetar, desenvolver e manter pipelines de dados escaláveis em ambientes cloud, com um foco em Azure. O candidato ideal tem experiência em Databricks, Apache Spark, Python e SQL, e deve atuar colaborativamente com diversas equipes para garantir a qualidade e segurança dos dados. Além de um sólido conhecimento em DevOps e ferramentas de orquestração, a fluência em inglês técnico é desejável.

Qualificações

• Experiência sólida com Azure Data Services, incluindo Data Lake e Data Factory.
• Domínio de Databricks e Apache Spark para processamento de dados.
• Proficiência em Python e SQL para manipulação de dados.

Responsabilidades

• Projetar e manter pipelines de dados escaláveis na nuvem.
• Otimizar performance de pipelines e custos de infraestrutura em cloud.
• Colaborar com equipes para entender necessidades e traduzir em soluções.

Conhecimentos

Azure Data Services

Databricks

Apache Spark

Python

SQL

Git

DevOps

Ferramentas

Delta Lake

Power BI

Descrição da oferta de emprego

Engenheiro de dados Niteo Technologies • Rio de janeiro, estado do rio de janeiro, br

Descrição da vaga

💻 Responsabilidades

• Projetar, desenvolver e manter pipelines de dados escaláveis e eficientes em ambientes cloud (Azure).
• Trabalhar com Databricks para processamento de dados em larga escala, utilizando Spark.
• Garantir a qualidade, integridade e segurança dos dados em todas as etapas do processo.
• Colaborar com times de produto, engenharia e negócios para entender necessidades e traduzir em soluções de dados.
• Implementar boas práticas de governança, versionamento e documentação de dados.
• Otimizar performance de pipelines e custos de infraestrutura em cloud.
• Participar da definição de arquitetura de dados e estratégias de integração entre sistemas.

⚒️ Requisitos

• Experiência sólida com Azure Data Services (Data Lake, Data Factory, Synapse, etc.).
• Domínio de Databricks e Apache Spark.
• Proficiência em Python e SQL.
• Conhecimento em modelagem de dados, ETL/ELT e arquitetura orientada a dados.
• Experiência com versionamento de código (Git) e práticas DevOps para dados.
• Familiaridade com ferramentas de orquestração e monitoramento de pipelines.
• Capacidade analítica, atenção a detalhes e perfil colaborativo.

🌟 Desejável

• Experiência com Delta Lake, Unity Catalog e CI/CD para dados.
• Conhecimento em Power BI ou outras ferramentas de visualização.
• Experiência em ambientes ágeis e squads multidisciplinares.
• Inglês técnico.