Engenheiro De Dados

Niteo Technologies; Teletrabalho; BRL 20.000 - 80.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia está procurando um especialista em dados para projetar e manter pipelines escaláveis em ambientes cloud, focando em Azure e Databricks. O candidato ideal possui sólida experiência com Azure Data Services e conhecimento em ferramentas como Spark e DevOps. O trabalho envolve colaboração com equipes diversas e implementação de práticas de governança de dados, garantindo segurança e integridade. Se você é analítico e detalhista, essa é a oportunidade ideal para você.

Qualificações

• Experiência sólida com Azure Data Services (Data Lake, Data Factory, Synapse, etc.).
• Domínio de Databricks e Apache Spark.
• Proficiência em Python e SQL.
• Conhecimento em ETL/ELT e arquitetura orientada a dados.
• Experiência com versionamento de código (Git) e práticas DevOps para dados.

Responsabilidades

• Projetar, desenvolver e manter pipelines de dados escaláveis e eficientes em ambientes cloud (Azure).
• Trabalhar com Databricks para processamento de dados em larga escala.
• Garantir a qualidade e segurança dos dados.
• Colaborar com times de produto, engenharia e negócios.
• Implementar boas práticas de governança e documentação de dados.

Conhecimentos

Experiência sólida com Azure Data Services

Domínio de Databricks

Proficiência em Python

Proficiência em SQL

Conhecimento em ETL/ELT

Familiaridade com Git

Práticas DevOps para dados

Capacidade analítica

Descrição da oferta de emprego

Responsabilidades

Projetar, desenvolver e manter pipelines de dados escaláveis e eficientes em ambientes cloud (Azure).

Trabalhar com Databricks para processamento de dados em larga escala, utilizando Spark.

Garantir a qualidade, integridade e segurança dos dados em todas as etapas do processo.

Colaborar com times de produto, engenharia e negócios para entender necessidades e traduzir em soluções de dados.

Implementar boas práticas de governança, versionamento e documentação de dados.

Otimizar performance de pipelines e custos de infraestrutura em cloud.

Participar da definição de arquitetura de dados e estratégias de integração entre sistemas.

Requisitos

Experiência sólida com Azure Data Services (Data Lake, Data Factory, Synapse, etc.).

Domínio de Databricks e Apache Spark.

Proficiência em Python e SQL.

Conhecimento emagem de dados, ETL / ELT e arquitetura orientada a dados.

Experiência com versionamento de código (Git) e práticas DevOps para dados.

Familiaridade com ferramentas de orquestração e monitoramento de pipelines.

Capacidade analítica, atenção a detalhes e perfil colaborativo.

Desejável

Experiência com Delta Lake, Unity Catalog e CI / CD para dados.

Conhecimento em Power BI ou outras ferramentas de visualização.

Experiência em ambientes ágeis e squads multidisciplinares.

Inglês técnico.