Engenheiro de dados

Ewave do Brasil; Curitiba; On-site; BRL 120,000 - 180,000; Full time

Job summary

A Ewave do Brasil busca profissional de TI para atuar na ampliação de capabilities de dados, incluindo ingestão, transformação e armazenamento em ambientes on-premise e na nuvem. O candidato trabalhará com PySpark, SQL e Python para desenvolver pipelines, modelar dados e assegurar governança com LGPD.

Participará de iniciativas de dados escaláveis, otimizando performance e contribuindo para soluções de dados confiáveis, com foco em inovação e atendimento ao cliente.

Qualifications

• Conhecimentos avançados em PySpark, SQL e Python.
• Experiência com ETL e pipelines de dados.
• Conhecimento em governança de dados e LGPD.
• Modelagem de dados e Data Warehouses.

Responsibilities

• Auxiliar na implementação e manutenção de ingestão, transformação e armazenamento de dados.
• Desenvolver pipelines de dados em ambientes on-premise e na nuvem (Azure, Databricks).
• Implementar ETLs e integrações com PySpark, SQL e Python.
• Apoiar modelagem de bancos de dados e Data Warehouses.
• Contribuir para governança e segurança de dados conforme LGPD.
• Desenvolver e otimizar pipelines com PySpark e SQL.
• Criar estruturas de armazenamento de dados escaláveis.
• Aplicar Unity Catalog para governança de dados.
• Garantir eficiência e performance das soluções de dados.
• Promover inovação, meio ambiente e foco no cliente.

Skills

PySpark

SQL

Python

ETL/ELT

Data pipelines

Data modeling

Azure

Databricks

Unity Catalog

LGPD governance

Governança de dados

Tools

Azure Databricks

Unity Catalog

Job description

Nosso cliente é uma cooperativa de trabalho médico líder no mercado de assistência à saúde em sua área de atuação. Investe em inovação para cumprir o seu propósito de cuidar das pessoas com cada vez mais excelência. Por isso, necessita ampliar o seu quadro de profissionais na área de TI.

Responsabilidades:

• Apoiar a implementação e manutenção de processos de ingestão, transformação e armazenamento de dados, garantindo sua confiabilidade e acessibilidade.
• Auxiliar no desenvolvimento e manutenção de pipelines de dados em ambientes on-premise e em nuvem (Azure, Databricks)
• Implementar ETLs e integrações utilizando PySpark, SQL e Python
• Apoiar na modelagem de bancos de dados e Data Warehouses
• Colaborar na governança e segurança dos dados, garantindo conformidade com a LGPD
• Atua na construção e otimização de pipelines de dados, garantindo a qualidade e confiabilidade das informações.
• Desenvolver e otimizar pipelines de dados em PySpark e SQL
• Criar e manter estruturas de armazenamento de dados escaláveis
• Implementar estratégias de governança de dados utilizando Unity Catalog
• Garantir a eficiência e performance das soluções de dados.
• Estimular ações e políticas voltadas à inovação, ao meio ambiente, responsabilidade social, governança, garantido o foco no cliente através das práticas.