Engenheiro/Engenheira de Dados Júnior - Databricks, Pyspark

Capgemini; Recife; Hybrid; BRL 120,000 - 180,000; Full time

Benefits offered by this job

Plano de carreira

Universidade Corporativa

Certificações oficiais

Benefícios de saúde

Ambiente inclusivo

Job summary

A Capgemini Brasil busca Engenheiro(a) de Dados com foco em Databricks, PySpark e ETL para atuar em projeto com abordagem híbrida. Responsabilidades incluem desenvolver dashboards, pipelines ETL/ELT, explorar grandes volumes de dados com Spark e SQL, e garantir qualidade dos dados, ampliando a governança e a observabilidade dos conjuntos de dados.

A atuação envolve colaboração com equipes de negócio e tecnologia.

Qualifications

• Experiência prática utilizando Databricks em projetos de dados ou Analytics.
• Domínio de SQL, incluindo consultas complexas sobre grandes volumes de dados.
• Experiência com exploração, transformação e análise de dados.
• Conhecimento de modelagem de dados para ambientes analíticos.
• Experiência com processos ETL/ELT e integração de diferentes fontes de dados.
• Experiência com construção de dashboards, relatórios e indicadores analíticos.

Responsibilities

• Desenvolver análises, datasets, indicadores, relatórios e dashboards utilizando Databricks como plataforma principal.
• Explorar e processar grandes volumes de dados por meio de SQL, Spark/PySpark e recursos do ecossistema Databricks.
• Investigar variações e comportamentos de indicadores, identificando causas, anomalias e problemas de qualidade.
• Transformar perguntas de negócio em hipóteses, métricas, consultas e visualizações.
• Construir e evoluir tabelas, views e camadas analíticas para consumo de indicadores e dashboards.
• Validar integridade, consistência, completude e confiabilidade dos dados antes da disponibilização das informações.

Skills

Databricks

PySpark

SQL

ETL/ELT

Data modeling

Tools

Apache Spark

Databricks

Python

Job description

Nossa OportunidadeVocê é apaixonado(a) por tecnologia, inovação e quer fazer parte de um ambiente inclusivo, colaborativo e em constante evolução? Então essa oportunidade é para você!Na Capgemini, valorizamos o equilíbrio entre vida pessoal e profissional. Por isso, oferecemos modelos de trabalho flexível, híbrido, de acordo com as necessidades do projeto. Nosso objetivo é proporcionar a melhor experiência para você, respeitando seu estilo de vida e promovendo bem-estar.Estamos em busca de um(a) Engenheiro(a) de Dados com foco em Databricks, Pyspark e ETL , para compor nosso time.ResponsabilidadesDesenvolver análises, datasets, indicadores, relatórios e dashboards utilizando Databricks como plataforma principal.Explorar e processar grandes volumes de dados por meio de SQL, Spark/PySpark e recursos do ecossistema Databricks.Investigar variações e comportamentos de indicadores, identificando possíveis causas, anomalias, problemas de qualidade ou mudanças de negócio.Estruturar demandas analíticas pouco definidas, transformando perguntas de negócio em hipóteses, métricas, consultas e visualizações.Construir e evoluir tabelas, views e camadas analíticas adequadas ao consumo de indicadores e dashboards.Validar integridade, consistência, completude e confiabilidade dos dados antes da disponibilização das informações. Esses aspectos de qualidade estão explicitamente previstos no escopo do serviço.Atuar junto às áreas de negócio no entendimento das regras, definição de indicadores e análise dos resultados.Participar da construção e evolução de processos ETL/ELT e pipelines necessários à disponibilização dos dados.RequisitosExperiência prática utilizando Databricks em projetos de dados ou Analytics.Domínio de SQL, incluindo consultas complexas sobre grandes volumes de dados.Experiência com exploração, transformação e análise de dados.Conhecimento de Apache Spark e/ou PySpark.Experiência na construção de datasets, tabelas, views ou camadas analíticas destinadas à geração de indicadores.Conhecimento de modelagem de dados para ambientes analíticos.Experiência com processos ETL/ELT e integração de diferentes fontes de dados.Experiência com construção de dashboards, relatórios e indicadores analíticos.Capacidade de investigar desvios, tendências e anomalias em indicadores.Conhecimento de práticas de validação, qualidade e consistência de dados.Capacidade de traduzir problemas e necessidades de negócio em análises estruturadas.Diversidade, Inclusão e Pertencimento:Na Capgemini, você pode ser quem você é. Valorizamos a diversidade em todas as suas formas e promovemos um ambiente inclusivo por meio de comitês como:Women@Capgemini – Empoderamento feminino e equidade de gênero.Capgemini Black – Representatividade e valorização da cultura negra.LGBTQIA+@Capgemini, Capgemini Accessibility, entre outros.Nosso compromisso é contínuo: somos reconhecidos pela GPTW, Bloomberg Gender Equality Index, EDGE e Ethisphere como uma das empresas mais éticas e inclusivas do mundo. Nossas vagas são para todas as pessoas, independentemente de cor, etnia, religião, idade, identidade de gênero, orientação sexual ou deficiência.Desenvolvimento e BenefíciosAqui, você é protagonista da sua carreira! Oferecemos:Plano de carreira estruturado e trilhas personalizadas de aprendizado.Universidade Corporativa, com acesso a Harvard, Udemy.Certificações oficiais com parceiros como SAP, AWS, Microsoft, Salesforce.Idiomas com EF Education First (Inglês, Espanhol, Francês e Alemão).Bem-estar completo:Assistência médica e odontológica.Wellhub e Equilibrium (saúde física e mental).Previdência privada e seguro de vida.Programa Family Care: licenças maternidade e paternidade estendidas, apoio à fertilidade, orientação personalizada em saúde e bem-estar.Vale-refeição, clube de benefícios e muito mais!Make It RealNa Capgemini, liberamos a energia humana por meio da tecnologia para construir um futuro mais inclusivo, sustentável e inovador. Se você compartilha desses valores, venha transformar o mundo com a gente!