Engenheiro de Dados | Azure | Home-Office

Lumini IT Solutions.; Brasil; Teletrabalho; BRL 20.000 - 80.000; Tempo parcial

Resumo da oferta

Uma empresa de soluções de TI está buscando um Engenheiro de Dados para atuar na construção e integração de pipelines de dados no ambiente Azure. O profissional será responsável pela integração de APIs e implementações escaláveis. Requisitos incluem experiência sólida em construção de pipelines e conhecimento em Azure Data Services.

Qualificações

• Experiência sólida como Engenheiro de Dados, com foco em construção de pipelines escaláveis.
• Conhecimento avançado em Azure Data Services.
• Experiência em integração de dados via APIs REST/SOAP.
• Conhecimento em bancos de dados relacionais e não relacionais.
• Habilidade com Python, Spark, SQL e PowerShell.

Responsabilidades

• Projetar e desenvolver pipelines de ingestão de dados de fontes externas.
• Integrar e consolidar dados de diferentes fontes no ambiente Azure.
• Implementar arquitetura de referência para processamento e armazenamento de dados.
• Criar e gerenciar data lakes e data warehouses.
• Desenvolver e otimizar processos de ETL/ELT utilizando ferramentas da Microsoft.

Conhecimentos

Engenheiro de Dados

Integração de APIs

Azure Data Services

Python

SQL

DataOps

Ferramentas

Azure Data Factory

Databricks

Synapse Analytics

SQL Server

PostgreSQL

Descrição da oferta de emprego

Job description

UTILIZE A SUA PAIXÃO POR TECNOLOGIA PARA CAUSAR IMPACTO POSITIVO E #VemSerLuminiIT

Aqui na Lumini IT a inovação e a resiliência fazem parte da nossa rotina.

Somos uma empresa de soluções de TI que preza pela qualidade e agilidade na entrega de seus serviços.

O nosso grande segredo para estar sempre um passo à frente do mercado é a audácia e a transformação que cada LUMINER promove todos os dias.

Nossa integridade nos impulsiona e, o melhor, todo mundo colabora com todo mundo, não importa quem deu a ideia, somos uma empresa de estratégia horizontal, todas as pessoas estão dispostas a ajudar e se envolvem legitimamente para fazer dar certo e entregar resultados.

Curtiu? Inscreva-se na vaga!

Main responsibilities

Descrição da Posição

Estamos em busca de um Engenheiro de Dados para atuar na construção e integração de pipelines de dados no ambiente Azure, garantindo a ingestão, processamento e disponibilidade dos dados.

O profissional será responsável pela integração de APIs externas e bases de dados existentes, além da implementação de arquiteturas escaláveis para análise e tomada de decisão.

O projeto está inserido em um programa de longa duração demodernização e inovação com foco em Dados, IA, Produtividade, Otimização e Automação de Processos em uma grande transportadora no Brasil.

Principais Responsabilidades

• Projetar e desenvolver pipelines de ingestão de dados de fontes externas (APIs, bancos relacionais e não relacionais, arquivos, sensores de telemetria, etc.);
• Integrar e consolidar dados de diferentes fontes no ambiente Azure, garantindo qualidade e consistência;
• Implementar arquitetura de referência para processamento e armazenamento de dados;
• Criar e gerenciar data lakes, data warehouses e data marts dentro do ecossistema Azure;
• Desenvolver e otimizar processos de ETL/ELT utilizando ferramentas da Microsoft como Azure Data Factory, Databricks, Synapse Analytics e Azure Functions;
• Garantir a governança, segurança e escalabilidade dos pipelines de dados;
• Monitorar e otimizar a performance das cargas de dados, identificando gargalos e propondo melhorias;
• Trabalhar em estreita colaboração com cientistas de dados e analistas funcionais para atender às necessidades do negócio.

Requirements and skills

Perfil Desejado

• Experiência sólida como Engenheiro de Dados, com foco em construção de pipelines escaláveis;
• Conhecimento avançado em Azure Data Services, incluindo Data Factory, Synapse, Databricks, Azure SQL, Blob Storage e Monitoramento;
• Experiência em integração de dados via APIs REST/SOAP e consumo de dados em tempo real;
• Conhecimento em bancos de dados relacionais (SQL Server, PostgreSQL) e não relacionais (CosmosDB, MongoDB);
• Habilidade com Python, Spark, SQL e PowerShell para manipulação e processamento de dados;
• Experiência com DataOps, versionamento de código (Git) e CI/CD para pipelines de dados;
• Conhecimento em modelagem de dados, otimização de consultas e tuning de banco de dados;
• Noções de segurança e compliance em dados, incluindo LGPD e melhores práticas de armazenamento e compartilhamento;
• Capacidade de documentação e comunicação clara para interação com equipes técnicas e de negócio.

Diferenciais

• Experiência com event-driven architectures usando Azure Event Hub ou Kafka;
• Conhecimento em machine learning pipelines e MLOps no Azure;
• Certificações Microsoft (DP-203 – Azure Data Engineer Associate ou afins).

Additional information

Modalidade de Trabalho: Remoto, com possíveis viagens ao cliente.

Contratação: PJ;

Horário de atuação da equipe:comercial.

Importante: Nós valorizamos a diversidade e inclusão, consideramos todos os candidatos para as nossas vagas, independente de cor, raça, religião, gênero e identidade de gênero, nacionalidade, deficiência, orientação sexual, ascendência, idade, etc.