Engenheiro de Dados

Vaganet; Conservatória; Remote; BRL 120,000 - 200,000; Full time

Job summary

A Vaganet busca Engenheiro(a) de Dados para construir, sustentar e evoluir pipelines de dados, com foco em ETL/ELT, automação, observabilidade, integração via APIs e processamento em grandes volumes no Oracle. Trabalho remoto.

Responsabilidades incluem Airflow, APIs, Oracle, CI/CD com Azure DevOps, observabilidade com ELK, containers com Docker e melhoria contínua de performance.

Qualifications

• Formação técnica ou superior em Computação, Sistemas, Engenharia ou áreas correlatas.
• Experiência com pipelines de dados (ETL/ELT) e orquestração.
• Conhecimento em Oracle e manipulação de grandes volumes de dados.
• Vivência com Linux para administração de serviços e rotinas operacionais.
• Experiência com Git (Azure DevOps) e Docker.
• Domínio em Python para automações e manipulação de dados.
• Conhecimento em Apache Airflow, incluindo DAGs, schedulers e SLAs.
• Conhecimentos em observabilidade com ELK.

Responsibilities

• Construir e manter pipelines de ETL/ELT utilizando Apache Airflow.
• Desenvolver integrações de dados via APIs, garantindo autenticação, governança e versionamento.
• Manipular grandes volumes de dados em Oracle, realizando extrações, cargas e otimizações de consultas.
• Implementar e manter processos de CI/CD utilizando Azure DevOps.
• Garantir observabilidade e monitoramento dos pipelines com Stack ELK (Elasticsearch, Logstash e Kibana).
• Containerizar aplicações e serviços com Docker para ambientes de desenvolvimento, homologação e produção.
• Apoiar melhorias contínuas em performance, automação e qualidade dos processos de dados.

Skills

Python

Airflow

Oracle DB

Linux

Education

Curso técnico/superior

Tools

Docker

Azure DevOps

Apache Airflow

ELK Stack

Job description

Descrição

Buscamos um(a) Engenheiro(a) de Dados para atuar na construção, sustentação e evolução de pipelines de dados e integrações, garantindo disponibilidade, confiabilidade e qualidade das informações ponta a ponta. A posição tem foco em ETL/ELT, automação, observabilidade, integração via APIs e processamento de grandes volumes de dados em ambientes Oracle.

Responsabilidades e atribuições

• Construir e manter pipelines de ETL/ELT utilizando Apache Airflow;
• Desenvolver integrações de dados via APIs, garantindo autenticação, governança e versionamento;
• Manipular grandes volumes de dados em Oracle, realizando extrações, cargas e otimizações de consultas;
• Implementar e manter processos de CI/CD utilizando Azure DevOps;
• Garantir observabilidade e monitoramento dos pipelines com Stack ELK (Elasticsearch, Logstash e Kibana);
• Containerizar aplicações e serviços com Docker para ambientes de desenvolvimento, homologação e produção;
• Apoiar melhorias contínuas em performance, automação e qualidade dos processos de dados.

Requisitos e qualificações

• Formação técnica ou superior (cursando ou concluída) em Computação, Sistemas, Engenharia ou áreas correlatas;
• Experiência com pipelines de dados (ETL/ELT) e orquestração;
• Conhecimento em Oracle e manipulação de grandes volumes de dados;
• Vivência com Linux para administração de serviços e rotinas operacionais;
• Experiência com Git (Azure DevOps) e Docker;
• Domínio em Python para automações e manipulação de dados;
• Conhecimento em Apache Airflow, incluindo DAGs, schedulers e SLAs;
• Conhecimentos em observabilidade com ELK.

Informações da vaga

• Modalidade de trabalho: Remote