Sênior -Data Engineer -Brazil

CI&T Software S.A.; Região Geográfica Intermediária de Campinas; Presencial; BRL 20.000 - 80.000; Tempo integral

Resumo da oferta

A CI&T, uma referência em transformação tecnológica, busca um Data Engineer Sênior para liderar projetos em um importante cliente do setor de Seguros. O profissional será responsável pela criação de pipelines de dados escaláveis, colaborando com diversas equipes e utilizando tecnologias de ponta como Apache Spark e Azure. Se você possui experiência sólida em engenharia de dados e deseja fazer parte de uma empresa que valoriza a diversidade e a inclusão, essa vaga é para você.

Serviços

Plano de saúde

Vale alimentação e refeição

Licença paternidade estendida

Qualificações

• Experiência sólida em desenvolvimento de pipelines de ETL e em engenharia de dados.
• Proficiência em ferramentas de big data, como Apache Spark e Databricks.
• Conhecimento de Python e bibliotecas de manipulação de dados como Pandas.

Responsabilidades

• Liderar o desenvolvimento e a implementação de pipelines de ETL para diversas fontes de dados.
• Colaborar com equipes multifuncionais para soluções de análise de dados.
• Garantir a entrega de pipelines de dados de alta qualidade com eficiência.

Conhecimentos

Engenharia de dados

Desenvolvimento de pipelines de ETL

Big Data

Python

Monitoramento de pipelines

Ferramentas

Apache Spark

Databricks

Azure Data Lake Storage

Power Automate

Apache Airflow

PostgreSQL

MySQL

MongoDB

Power BI

Descrição da oferta de emprego

Somos especialistas em transformação tecnológica, unindo expertise humana à IA para criar soluções tech escaláveis. Com mais de 6.500 CI&Ters ao redor do mundo, já formamos parcerias com mais de 1.000 clientes durante nossos 30 anos de história. Inteligência Artificial é nossa realidade.

Importante: posições localizadas na Região Metropolitana de Campinas, sua presença nos escritórios da cidade será obrigatória, conforme a política de frequência vigente.

Buscamos uma pessoa Data Engineer, de nível Sênior, para atuar em um grande cliente do segmento de Seguros e Resseguros com atuação global, liderando o desenvolvimento e a implementação de pipelines.

Responsabilidades:

1. Trabalhar diretamente com cliente da área de seguros, liderando o desenvolvimento e a implementação de pipelines de ETL para integrar diversas fontes de dados.
2. Colaborar com equipes multifuncionais para projetar soluções que atendam às necessidades de análise de dados e relatórios.
3. Utilizar sua experiência em engenharia de dados para selecionar as melhores ferramentas e tecnologias, aprimorando as práticas de gerenciamento de dados da equipe.
4. Envolver-se em atividades de solução de problemas, aplicando pensamento analítico e conceitual para criar soluções eficazes e escaláveis.
5. Garantir a entrega de pipelines de dados de alta qualidade com foco em desempenho e eficiência, minimizando taxas de falhas e retrabalho.

Requisitos:

1. Experiência sólida em engenharia de dados, com desenvolvimento de pipelines de ETL.
2. Proficiência em ferramentas e tecnologias de big data, como Apache Spark, Databricks e Azure Data Lake Storage.
3. Conhecimento em Python e experiência com bibliotecas de manipulação de dados (ex: Pandas).
4. Experiência com integração de dados de fontes diversas, incluindo FTP, arquivos CSV e APIs RESTful.
5. Familiaridade com automação e orquestração de workflows, usando Power Automate ou Apache Airflow.
6. Conhecimento em bancos de dados relacionais (ex: PostgreSQL, MySQL) e NoSQL (ex: MongoDB).
7. Compreensão de governança de dados e práticas de qualidade de dados.
8. Experiência em monitoramento e manutenção de pipelines de dados, com foco em métricas de desempenho e logs.

Diferenciais:

1. Experiência com arquiteturas em nuvem, preferencialmente Azure, com foco em escalabilidade e alta disponibilidade.
2. Familiaridade com ferramentas de visualização de dados, como Power BI.
3. Experiência com metodologias ágeis e práticas DevOps em integração e entrega contínua de dados.
4. Conhecimento em testes e validação de dados, garantindo integridade e precisão.
5. Experiência com ferramentas de monitoramento e rastreabilidade, como Azure Monitor ou Datadog.

A CI&T prioriza a igualdade de oportunidades, valorizando diversidade de identidades e experiências. Incentivamos candidaturas de comunidades diversas e sub-representadas. Oferecemos benefícios como plano de saúde e odontológico, vale alimentação e refeição, licença paternidade estendida, entre outros.