Data Engineer Remota Int

Gft Brasil; Barueri; Presencial; BRL 120 000 - 240 000; Tempo integral

Resumo da oferta

A Gft Brasil busca um Engenheiro de sistemas (software) com experiência em engenharia e modelagem de dados para desenvolver soluções analíticas escaláveis. O contratado atuará com áreas de negócio e times técnicos para transformar necessidades em soluções de dados.

O papel envolve governança, qualidade, segurança e conformidade, além de trabalhar na integração de diversas fontes, serviços e APIs para gerar insights e suportar a tomada de decisão.

Qualificações

• Experiência avançada com Python aplicado a soluções de dados.
• Conhecimento em bibliotecas de manipulação de dados, como Pandas.
• Experiência com Apache Airflow para criação e manutenção de DAGs.
• Conhecimento em integração entre Airflow e dbt-core.
• Experiência com dbt-core para desenvolvimento e manutenção de modelos e macros.
• Vivência na migração de códigos SQL para DBT.
• Conhecimento em Git e práticas de versionamento e implantação de código.
• Conhecimento avançado em SQL Server, incluindo performance tuning, otimização e análise de desempenho.
• Conhecimentos em proteção de dados, governança e compliance.

Responsabilidades

• Modelar e desenhar estruturas de dados eficientes para consultas analíticas, com foco em desempenho e integridade.
• Garantir governança, qualidade, segurança e conformidade dos dados conforme políticas.
• Implementar práticas de governança de dados para padronização e confiabilidade.
• Traduzir requisitos de negócio em soluções técnicas de dados.
• Otimizar pipelines de dados para melhoria de performance de relatórios.
• Integrar dados de várias fontes, sistemas e APIs para insights e decisão.
• Desenvolver, manter e aprimorar workflows de engenharia de dados com ferramentas do ecossistema de dados.
• Realizar análises de desempenho e otimização de ambientes de banco de dados.

Conhecimentos

Python

Pandas

Airflow

dbt-core

SQL Server

Data modeling

Data governance

Git

SQL

Data integration

ETL

Ferramentas

Apache Airflow

dbt-core

Git

SQL Server

Descrição da oferta de emprego

Descrição da vaga

O que buscamos Buscamos um(a) profissional com experiência em engenharia e modelagem de dados, capaz de desenvolver e otimizar soluções analíticas, garantindo qualidade, governança e integridade dos dados. A pessoa atuará em colaboração com áreas de negócio e times técnicos para transformar necessidades corporativas em soluções escaláveis de dados, integrando diferentes fontes, serviços e APIs.

Responsabilidades

Atuar na modelagem e desenho de estruturas de dados eficientes para consultas analíticas, assegurando desempenho, escalabilidade e integridade dos dados. Garantir a governança, qualidade, segurança e conformidade dos dados de acordo com normas, políticas e regulamentações aplicáveis. Implementar e sustentar práticas de governança de dados visando a padronização e confiabilidade das informações. Colaborar com stakeholders para entender necessidades de negócio e traduzir requisitos em soluções técnicas de dados. Otimizar pipelines de dados para melhorar a performance de processos analíticos e relatórios. Integrar dados provenientes de diferentes fontes, sistemas, serviços e APIs para geração de insights e suporte à tomada de decisão. Desenvolver, manter e aprimorar workflows e processos de engenharia de dados utilizando ferramentas e frameworks do ecossistema de dados. Realizar análises de desempenho e otimização de ambientes de banco de dados.

Requisitos e Qualificações

Experiência avançada com Python aplicado a soluções de dados. Conhecimento em bibliotecas de manipulação e processamento de dados, como Pandas. Experiência com Apache Airflow para criação e manutenção de DAGs. Conhecimento em integração entre Airflow e dbt-core. Experiência com dbt-core para desenvolvimento e manutenção de modelos e macros. Vivência na migração de códigos SQL para DBT. Conhecimento em Git e práticas de versionamento e implantação de código. Conhecimento avançado em SQL Server, incluindo performance tuning, otimização e análise de desempenho. Familiaridade operacional com arquitetura Medallion. Conhecimentos em análise de dados e modelagem de dados de negócio. Conhecimento em proteção de dados, governança e compliance.

Diferenciais

Experiência em projetos de integração de múltiplos serviços e APIs. Vivência em iniciativas de governança de dados corporativos. Experiência em ambientes analíticos de grande volume de dados. Conhecimento de processos relacionados a gestão de riscos, requisitos regulatórios e compliance de dados.

Formação Acadêmica:

Não informado

Salário:

A combinar

Cargo:

Engenheiro de sistemas (software)

Empresa:

Gft Brasil

Serviços de TI.

Ramo:

Informática/ Tecnologia

(EF)