Desenvolvedor(a) Backend Spark / Scala – Métricas de Risco

Grupo Data; São Paulo; Presencial; BRL 180 000 - 300 000; Tempo integral

Resumo da oferta

Grupo Data procura desenvolvedor backend para projeto internacional no setor financeiro, focando processamento de dados, métricas de risco e reporting regulatório. Será utilizado Apache Spark, Scala, SQL/PLSQL e Control-M para orquestração de pipelines.

Requisito de inglês e espanhol em conversação, com disponibilidade para atuar no fuso horário da Espanha. Trabalhará em ambiente Agile com equipes internacionais, contribuindo desde a análise até a implantação e suporte.

Qualificações

• Experiência em backend ou Big Data com Spark e Scala.
• Conhecimento de SQL/PL/SQL e pipelines de dados
• Experiência com controle de dados, qualidade e rastreabilidade de dados
• Conhecimento em CI/CD e ferramentas de monitoramento de produção
• Disponibilidade para atuar no fuso horário da Espanha

Responsabilidades

• Desenvolver e manter soluções backend com Spark/Scala.
• Configurar ingestão, transformação, validação e publicação de grandes volumes de dados.
• Desenvolver rotinas em SQL/PL/SQL e planejar processos com Control-M.
• Criar pipelines de dados para métricas de risco e relatórios regulatórios.
• Otimizar desempenho, confiabilidade e escalabilidade de Spark.
• Realizar testes unitários e de integração e apoiar UAT.
• Investigar incidentes e resolver problemas em produção.
• Participar do ciclo completo de desenvolvimento e apoiar operações internacionais.
• Colaborar com equipes globais em ambiente Agile.

Conhecimentos

Inglês (conversação)

Espanhol (conversação)

Trabalho em equipe

Agilidade e foco em resultados

Ferramentas

Apache Spark

Scala

SQL/PLSQL

Control-M/Airflow

Databricks/AWS/Azure

CI/CD (GitHub, Jenkins, Sonar)

Power BI

ServiceNow

Descrição da oferta de emprego

Estamos buscando um(a) Desenvolvedor(a) Backend para atuar em um projeto internacional do mercado financeiro, desenvolvendo soluções de processamento de dados para métricas de risco e reporting regulatório, com foco em Apache Spark, Scala, PL/SQL e Control-M.

Principais responsabilidades

• Desenvolver e manter soluções backend utilizando Apache Spark e Scala;
• Implementar processos de ingestão, transformação, validação e publicação de grandes volumes de dados;
• Desenvolver consultas e rotinas em SQL e PL/SQL;
• Planejar e orquestrar processos utilizando Control-M;
• Desenvolver e manter pipelines de dados para métricas e relatórios regulatórios;
• Otimizar o desempenho, a confiabilidade e a escalabilidade dos processos Spark;
• Realizar testes unitários e integrados e apoiar testes de aceitação (UAT);
• Investigar incidentes, identificar suas causas e resolver problemas em produção;
• Participar de todo o ciclo de desenvolvimento, da análise de necessidades à implantação e ao suporte;
• Colaborar com equipes internacionais em ambiente Agile.

Requisitos obrigatórios

• Experiência em desenvolvimento backend ou Big Data, com atuação em Apache Spark e Scala;
• Conhecimento de SQL e PL/SQL;
• Experiência com pipelines de dados e Datalake;
• Conhecimento de Control-M e Airflow;
• Conhecimento de Databricks, Azure, AWS Compute e/ou YARN;
• Experiência com CI/CD e ferramentas como GitHub, Jenkins e Sonar;
• Conhecimento de Power BI;
• Conhecimento de ServiceNow e experiência em monitoramento e suporte de produção;
• Experiência com testes unitários, integrados e validações em UAT e produção;
• Conhecimentos de qualidade e rastreabilidade de dados;
• Experiência no setor bancário, especialmente com riscos, métricas regulatórias, P&L, avaliações financeiras, exposição, limites, ratings ou reporting;
• Inglês em nível de conversação;
• Espanhol em nível de conversação;
• Disponibilidade para atuar no fuso horário da Espanha.

Apache Spark | Scala | SQL | PL/SQL | Control-M | Pipelines de Dados | Métricas de Risco | Reporting Regulatório