Engenheiro de Dados Sênior

DataEX

Brasil

A distancia

BRL 180.000 - 300.000

Jornada completa

14 días+

Una candidatura completa en un minuto

Currículum y carta de presentación personalizados, listos para enviar.

Supera los filtros ATS

Ventajas ofrecidas por este puesto de trabajo

Cartão iFood Benefícios para Alimentac

Plano Médico Porto Saúde

Plano Odontológico Porto Saúde

Seguro de Vida Porto Saúde

English Pass

Wellhub - bem-estar

Day-off de Aniversário

Convênio SESC

Parceria com SENAC - cursos/disccs

Subsídio a Certificações Microsoft/AWS

Descripción de la vacante

A DataEX, consultoria especializada em Dados e IA, busca Engenheiro de Dados Sênior para atuar no desenvolvimento de soluções de Big Data em nuvem, com foco em Microsoft Azure e Databricks. Será responsável por construir e otimizar pipelines, garantir a qualidade e performance dos dados e contribuir com soluções de governança, segurança e engenharia de dados.

A posição é CLT com Home Office, permitindo atuação remota.

Formación

Experiência de pelo menos 3 anos em Engenharia de Dados ou função correlata.
Experiência com pipelines ETL/ELT.
Experiência com Microsoft Azure, especialmente Azure Data Factory.
Azure Databricks e Azure Data Lake.
Conhecimento sólido em SQL e Python.
Experiência com PySpark e processamento distribuído.
Conhecimentos de bancos de dados relacionais e NoSQL.
Conhecimentos de Big Data e processamento de grandes volumes de dados.
Experiência com Git/controle de versionamento.
Conhecimentos de qualidade, segurança e governança de dados/LGPD.
Capacidade de levantamento e análise de requisitos junto às áreas de negócio.
Experiência com documentação técnica.

Responsabilidades

Desenvolver, manter e sustentar pipelines de dados usando Azure Data Factory, Azure Databricks e Azure Data Lake.
Transformar dados com SQL e Python, incluindo PySpark.
Levantamento de requisitos com as áreas de negócio e tradução em soluções técnicas de dados.
Executar testes, validações e controles de qualidade para garantir integridade dos dados.
Monitorar pipelines, identificar gargalos e otimizar performance e custos.
Participar de projetos de implementação, evolução e migração de soluções de dados.
Aplicar práticas de segurança, privacidade, governança de dados e LGPD.

Conocimientos

SQL

Python

ETL/ELT pipelines

Git

PySpark

Big Data

Herramientas

Azure Data Factory

Azure Databricks

Azure Data Lake

Databricks

Descripción del empleo

Oportunidade: Engenheiro de Dados Sênior (Azure/ Databricks)

Sobre a DataEX:

Com 12 anos de atuação no mercado, a DataEX é uma consultoria especializada em Dados e IA, com parcerias estratégicas com Microsoft, AWS e Databricks, atuando em projetos de alto impacto para grandes clientes. Valorizamos a inovação, a colaboração, o desenvolvimento contínuo e a qualidade de vida, com incentivos voltados certificações e bem-estar.

Sobre a vaga

Estamos em busca de um(a) profissional de Engenharia de Dados para atuar no desenvolvimento e evolução de soluções de Big Data em nuvem, com foco em Microsoft Azure e Databricks. A pessoa será responsável por construir e otimizar pipelines, garantir a qualidade e performance dos dados e contribuir com soluções estratégicas de governança, segurança e engenharia de dados.

Informações

Modelo de contratação: CLT
Home Office

Requisitos Técnico

Experiência mínima de 3 anos em Engenharia de Dados ou atividades correlatas
Experiência prática no desenvolvimento e sustentação de pipelines ETL/ELT
Experiência com Microsoft Azure, especialmente: Azure Data Factory
Azure Databricks
Azure Data Lake
Conhecimento sólido em SQL e Python
Experiência com PySpark e processamento distribuído
Conhecimento de bancos de dados relacionais e NoSQL
Conhecimentos de Big Data e processamento de grandes volumes de dados
Experiência com Git/controle de versionamento
Conhecimentos de qualidade, segurança e governança de dados/LGPD
Capacidade de levantamento e análise de requisitos junto às áreas de negócio
Experiência com documentação técnica

Diferenciais

Certificações Microsoft relacionadas a Azure e Engenharia de Dados
Experiência em projetos de migração ou modernização de plataformas de dados
Conhecimentos de CI/CD e práticas de DevOps aplicadas a dados
Conhecimentos de otimização de performance e custos em ambientes de dados em nuvem
Experiência em ambientes corporativos críticos e/ou regulados

Atividades

Desenvolver, manter e sustentar pipelines de dados ETL/ELT utilizando Azure Data Factory, Azure Databricks e Azure Data Lake
Desenvolver soluções de processamento e transformação de dados utilizando SQL, Python e PySpark
Levantar e analisar requisitos junto às áreas de negócio, traduzindo necessidades funcionais em soluções técnicas de dados
Executar testes, validações e controles de qualidade, garantindo integridade, confiabilidade e acuracidade dos dados
Monitorar pipelines e ambientes de dados, identificando falhas, gargalos e oportunidades de melhoria de performance e custos
Realizar troubleshooting e atuar na resolução de incidentes e problemas relacionados às soluções de dados
Participar de projetos de implementação, evolução e migração de soluções de dados
Aplicar boas práticas de segurança, privacidade, qualidade e governança de dados, considerando políticas internas e requisitos da LGPD
Utilizar práticas de versionamento de código e colaboração por meio de Git
Elaborar e manter documentação técnica de pipelines, processos, integrações e soluções implementadas
Participar de reuniões com stakeholders para entendimento de requisitos, apresentação de soluções e acompanhamento das demandas
Apoiar profissionais de menor experiência e contribuir para disseminação das boas práticas de engenharia de dados
Atuar em ambiente ágil, utilizando práticas como Scrum e Kanban

Benefícios que oferecemos para o modelo CLT de atuação