ENGENHEIRO DE DADOS DATABRICKS RESOURE FOR SAP

EcommIT Integrated Solutions; São Paulo; Teletrabalho; BRL 80.000 - 120.000; Tempo integral

Resumo da oferta

Uma empresa líder em soluções integradas de pagamento está em busca de um Desenvolvedor de Pipeline de Dados para trabalhar 100% remoto. O candidato ideal terá experiência com Azure Databricks e habilidades em SQL, além de ser capaz de otimizar e manter pipelines de dados. Esta posição oferece um contrato de 12 meses, com grandes chances de renovação, e a oportunidade de colaborar com equipes multifuncionais em um ambiente dinâmico.

Qualificações

• Proficiência no uso do Azure Databricks e do Spark para processamento de dados.
• Experiência com serviços de nuvem do Azure.
• Fortes habilidades analíticas e de resolução de problemas.

Responsabilidades

• Projete, desenvolva e mantenha pipelines de dados escalonáveis.
• Integre dados de várias fontes e garanta a qualidade e a consistência.
• Colabore com cientistas de dados e analistas para entender requisitos.

Conhecimentos

Desenvolvimento de pipeline de dados

Integração de dados

Otimização de desempenho

Colaboração

Documentação

Segurança e conformidade

Monitoramento e manutenção

Solução de problemas

Comunicação

Ferramentas

Azure Databricks

SQL

Azure Data Lake

Banco de Dados SQL do Azure

Armazenamento de Blobs do Azure

Descrição da oferta de emprego

Alerta de vaga - 100% remoto

EcommIT, mais de 15 anos integrando o DNA EcommIT nas empresas líderes do mercado de meios de pagamento. Venha fazer parte do nosso time.

Modelo de trabalho: 100% remoto

Período de Alocação: 12 meses - Grandes chances de renovação

Idioma: Inglês Avançado

Conhecimentos Técnicos Requeridos

• Desenvolvimento de pipeline de dados: projete, desenvolva e mantenha pipelines de dados escalonáveis usando o Azure Databricks para processar e analisar grandes conjuntos de dados.

• Integração de dados: integre dados de várias fontes e garanta a qualidade e a consistência dos dados em todo o pipeline.

• Otimização de desempenho: otimize o desempenho do processamento de dados e solucione problemas no ambiente do Databricks.

• Colaboração: Trabalhe em estreita colaboração com cientistas de dados, analistas e outras partes interessadas para entender os requisitos de dados e fornecer soluções.

• Documentação: crie e mantenha a documentação para processos de dados, arquitetura e fluxos de trabalho.

• Segurança e conformidade: Garanta a segurança dos dados e a conformidade com os regulamentos e padrões relevantes.

• Monitoramento e manutenção: Implemente soluções de monitoramento para garantir a confiabilidade do pipeline de dados e realizar manutenção regular.

Conhecimentos Técnicos Desejáveis

Habilidades técnicas:

• Proficiência no uso do Azure Databricks e do Spark para processamento de dados.
• A compreensão da estrutura MDMF será uma vantagem adicional
• Experiência com SQL e gerenciamento de banco de dados.

Experiência em nuvem:

• Experiência com serviços de nuvem do Azure, incluindo Azure Data Lake, Banco de Dados SQL do Azure e Armazenamento de Blobs do Azure.

Modelagem de dados:

• Capacidade de projetar e implementar modelos de dados complexos.

Solução de problemas:

• Fortes habilidades analíticas e de resolução de problemas.

Comunicação:

• Excelentes habilidades de comunicação para colaborar com equipes multifuncionais.
• Apoie e interaja com diversas equipes em vários locais e fusos horários.
• Interaja com uma equipe multifuncional para resolver problemas e reunir requisitos.
• Deve ser capaz de rastrear incidentes, solicitações de serviço, solicitações de alteração para garantir que os SLAs sejam atendidos.

São Paulo, São Paulo, Brazil 2 months ago

São Paulo, São Paulo, Brazil 6 months ago

Software Engineer JR/PL - Novas Integrações

São Paulo, São Paulo, Brazil 23 hours ago

São Paulo, São Paulo, Brazil 2 months ago

São Caetano do Sul, São Paulo, Brazil 1 month ago

São Paulo, São Paulo, Brazil 3 months ago

São Paulo, São Paulo, Brazil 4 months ago