Senior data engineer specialist

NetVagas; São Paulo; Presencial; BRL 60.000 - 100.000; Tempo integral

Resumo da oferta

Uma empresa inovadora e referência em Big Data e Inteligência Artificial busca profissionais apaixonados por transformar a experiência dos clientes através de dados. Se você é um especialista em Engenharia de Dados com forte conhecimento em Azure e Databricks, esta oportunidade é para você! Junte-se a um time diverso e colaborativo que valoriza a inclusão e o desenvolvimento contínuo. Oferecemos um ambiente de trabalho estimulante, com um pacote de benefícios robusto e oportunidades de crescimento profissional. Venha fazer parte de um futuro que se constrói juntos!

Serviços

Caju (cartão flexível)

Plano de Saúde Bradesco

Plano Odontológico Bradesco

Medicina preventiva

Seguro de Vida

Gympass

SESC

Auxílio Creche

PLR

Desconto em produtos

Qualificações

• Forte conhecimento em Azure e Databricks.
• Experiência em Spark e PySpark para processamento de dados.
• Conhecimento em CI/CD e ferramentas de DevOps.

Responsabilidades

• Entender profundamente domínios de dados específicos.
• Aplicar habilidades técnicas em Engenharia de Dados.
• Contribuir para inovação e pesquisa em dados.

Conhecimentos

Azure

Databricks

Spark

PySpark

Blob Storage

CI/CD

Kafka

SonarQube

Fortify

Formação académica

Bachelor's Degree in Computer Science

Postgraduate Degree in Data Engineering

Ferramentas

Azure Pipelines

GitHub

Delta Lake

Maven

PyPi

Descrição da oferta de emprego

Impactar positivamente bilhões de vidas é nosso propósito e também pode ser o seu!

Fundada em 2010, no Brasil, a Semantix é referência em Big Data, Analytics e Inteligência Artificial.

Somos um time de apaixonados por inovação, com diversas origens e diferentes graus de experiência. O que nos une é a motivação compartilhada de transformar a experiência de nossos clientes através da cultura data driven.

Se você se identificou, a Semantix é seu lugar.

Estamos ansiosos para ter você como parte do time.

Afinal, o futuro se faz juntos.

Responsabilidades e atribuições:

1. Ter um entendimento profundo e abrangente de um domínio específico de dados.
2. Aplicar habilidades técnicas avançadas, dominando ferramentas, metodologias e técnicas específicas do campo de Engenharia de Dados.
3. Solucionar problemas complexos e desafiadores dentro da área, utilizando conhecimentos avançados para encontrar soluções eficazes.
4. Contribuir para a inovação e pesquisa, desenvolvendo novas abordagens, realizando estudos e publicando insights relevantes.

Requisitos necessários:

• Forte conhecimento em Azure (Azure Pipelines, Azure Artifacts, GitHub);
• Forte conhecimento em Databricks (Unity Catalog, Delta Sharing);
• Conhecimento aprofundado de Spark e PySpark;
• Conhecimento aprofundado em métricas de clusterização;
• Processamento com paralelismo: Driver e Workers;
• Conhecimento aprofundado em multiprocessing e autoloader;
• Delta Lake e suas nuances, com versionamento, particionamento com Liquid Clustering;
• Tabelas parquet;
• Sincronização com origens diversas, incluindo: DB2, Oracle, APIs, BigQuery, Cobol (binário), entre outras;
• Conhecimento aprofundado em Blob Storage, Azure AKV, Service Principal, Conteinerização, Pacotes Wheels, Maven, PyPi;
• Grupos de usuário, Grants, Azure AD, IAM, Esteira DevOps, CI/CD;
• SonarQube, Fortify e Kafka.

Oferecemos salário compatível com o mercado, além de benefícios como:

• Caju (cartão flexível) com recarga de R$ 1.060/mês;
• Plano de Saúde Bradesco;
• Plano Odontológico Bradesco;
• Medicina preventiva com Dr. Alper;
• Seguro de Vida;
• Gympass;
• SESC;
• Auxílio Creche para mamães e papais;
• PLR;
• Learning – foco no desenvolvimento de hard e soft skills;
• Parceria com instituições de ensino para formação técnica, MBA, pós-graduação, certificações, inglês e espanhol;
• Plano de Carreira;
• Desconto em produtos de um portal parceiro.

Ressaltamos que todas as nossas vagas estão abertas a pessoas de todos os perfis e origens, valorizando a diversidade e promovendo um ambiente inclusivo e acolhedor para todos.