Engenheiro de Dados (Streaming)

Meu Home; São Paulo; Híbrido; BRL 180 000 - 280 000; Tempo integral

Resumo da oferta

Meu Home procura um engenheiro de dados sênior para projetar, desenvolver e sustentar pipelines de dados em tempo real (streaming) em ambientes com alto volume e criticidade. Você atuará com Apache Kafka, Python e Oracle, integrando com S3/MinIO e observabilidade com OpenTelemetry, além de orquestrar fluxos com IICS.

Experiência com Linux e práticas DevOps é desejável. A vaga oferece atuação em um time técnico e oportunidades de crescimento.

Qualificações

• Experiência com arquitetura, desenvolvimento e sustentação de pipelines de dados em tempo real.
• Conhecimento avançado em Apache Kafka para ingestão e processamento de eventos.
• Desenvolvimento em Python para integrações e automações.
• Armazenamento de objetos S3/MinIO.
• Informatica Cloud (IICS) para orquestração de fluxos de dados.
• SQL avançado para Oracle.
• Modelagem, ingestão, carga e integração de dados em Oracle.
• Arquiteturas orientadas a eventos e processamento em tempo real.
• Integração de sistemas e construção de pipelines de dados.
• Monitoramento, troubleshooting e otimização de performance.
• Experiência em Linux e DevOps será diferencial.
• Instrumentação com OpenTelemetry para observabilidade.

Responsabilidades

• Projetar, desenvolver e sustentar pipelines de dados em tempo real.
• Trabalhar com Apache Kafka para ingestão e processamento de eventos.
• Integrar com Oracle e armazenar dados em S3/MinIO.
• Orquestrar fluxos de dados com Informatica Cloud (IICS).
• Aplicar observabilidade com OpenTelemetry e monitoramento de pipelines.
• Garantir alta performance e resolução de gargalos em ambientes Linux.

Conhecimentos

Kafka

Python

Object storage

Informatica Cloud (IICS)

Oracle SQL

Event-driven architecture

Data integration

Observability

OpenTelemetry

Linux

DevOps

Ferramentas

Oracle DB

Git

CI/CD

Descrição da oferta de emprego

Senioridade: Sênior

Breve Resumo do Projeto: Profissional com experiência em arquitetura, desenvolvimento e sustentação de pipelines de dados em tempo real (streaming), atuando em ambientes de alta volumetria e criticidade. Conhecimento avançado em Apache Kafka para ingestão e processamento de eventos, Python para desenvolvimento de integrações e automações, armazenamento de dados em plataformas compatíveis com S3/MinIO, integração com bancos Oracle e instrumentação de processos utilizando OpenTelemetry para observabilidade fim a fim. Experiência na construção e orquestração de fluxos utilizando Informatica Intelligent Cloud Services (IICS), incluindo ingestão, transformação, carga e distribuição de dados.

Descrição Perfil Técnico

• Apache Kafka (producers, consumers, tópicos, particionamento e retenção).
• Desenvolvimento em Python.
• Armazenamento de objetos S3/MinIO.
• Informatica Cloud (IICS).
• SQL avançado para Oracle.
• Modelagem, ingestão, carga e integração de dados em bancos Oracle.
• Arquiteturas orientadas a eventos e processamento em tempo real.
• Integração de sistemas e construção de pipelines de dados.
• Monitoramento, troubleshooting e otimização de performance.
• Experiência com ambientes Linux e práticas DevOps será um diferencial.
• Instrumentação e observabilidade de pipelines de dados utilizando OpenTelemetry.
• Implementação de métricas, logs e traces distribuídos para monitoramento ponta a ponta de processos de ingestão, transformação e distribuição de dados.
• Experiência na integração de telemetria com plataformas de observabilidade e monitoramento para identificação proativa de falhas, gargalos e degradação de performance.

Diferenciais

• Desejável vivência em ambientes distribuídos, observabilidade, tratamento de falhas, escalabilidade e boas práticas de engenharia de dados.

Informações da Empresa

Nascida do objetivo de atender projetos e prestar serviços de forma eficiente e diferenciada somos uma empresa especializada em serviços de tecnologia e análise de dados, contando com uma equipe altamente capacitada em diversas áreas. Atendemos uma variedade de projetos, oferecendo expertise na captação e análise de dados, bem como a concepção e desenvolvimento de produtos.

Diferenciamo-nos pelo uso de uma metodologia única, proporcionando resultados de alta performance e qualidade com agilidade e eficiência. Acreditamos em ultrapassar o convencional, trazendo inovação para todos os segmentos de negócio.

Com mais de 12 anos de experiência no mercado de tecnologia, a Jump destaca-se como a parceira ideal para extrair o máximo potencial de seus dados de maneira eficaz e ágil. Nossa equipe especializada está sempre pronta para atender às necessidades específicas de nossos clientes em dados, a qualquer momento.