Data Developer (AI / Databricks) Sênior , Brazil

CI&T; Brasil; On-site; BRL 180,000 - 300,000; Full time

Benefits offered by this job

Plano de saúde e odontológico

Vale alimentação e refeição

Licença parental estendida

Wellhub (Gympass) TotalPass

PLR

Job summary

A CI&T, com 30 anos de atuação em transformação tecnológica, busca Engenheiro(a) de Dados Sênior para integrar a equipe de Transformação de Cadastro de Clientes. Será fundamental para desenvolver e manter pipelines de dados em Azure, utilizando Databricks e PySpark, assegurando qualidade e governança.

Você trabalhará com equipes multidisciplinares, participará da modelagem de dados, migração para a nuvem e deploy de modelos de IA; a posição exige presença no escritório da Região

Qualifications

• Experiência sólida em Azure Data Services, Databricks e PySpark.
• Domínio de Python e SQL para manipulação e transformação de dados.
• Conhecimento em CI/CD e versionamento com GitHub.
• Domínio de processos de ETL/ELT.
• Experiência em modelagem de dados (conceitual, lógica e física).
• Atuação com Microsoft Azure: ADF, Synapse, Data Lake Storage e Spark.
• Familiaridade com Git/GitHub e Azure DevOps para versionamento e automação de deploys.
• Vivência em projetos de migração para cloud e integração de grandes volumes de dados.
• Desejável experiência com deploy de modelos de IA e uso de ferramentas como Azure ML.

Responsibilities

• Desenvolvimento de Pipelines: Criar e manter pipelines de dados em Azure, com Databricks para processamento e integração.
• Automação de Deploys: CI/CD e versionamento de código no GitHub.
• Modelagem de Dados: Projetar modelos para escalabilidade, performance e governança.
• Migração para Cloud: Apoiar migração para cloud com foco em dados.
• Colaboração com Times: Trabalhar com times de negócio e ciência de dados para deploy de IA.
• Qualidade dos Dados: Garantir qualidade e integridade com data profiling e monitoramento.
• Documentação: Documentar arquiteturas e boas práticas de engenharia de dados.

Skills

Python

SQL

CI/CD

GitHub

Azure Data Services

Databricks

PySpark

Modelagem de Dados

Governança de Dados

Data Profiling

Azure DevOps

Tools

Azure Data Factory (ADF)

Azure Synapse

Data Lake Storage

Spark

Job description

Na CI&T , ajudamos grandes empresas a transformar o potencial da AI em impacto real nos negócios com AI Deployment, execução AI-native e tech-integrated business solutions.

Com 30 anos de experiência em transformação tecnológica, aceleramos inovação com expertise em agentic SDLC, application modernization, Data & AI, martech e business strategy.

Somos 8.000 CI&Ters em mais de 25 países, colaborando para construir soluções com impacto real. AI já faz parte da forma como trabalhamos, evoluímos e inovamos todos os dias.

Importante: se você reside na Região Metropolitana de Campinas, sua presença nos escritórios da cidade será obrigatória, conforme a política de frequencia vigente.

Estamos em busca de um(a) Engenheiro(a) de Dados Sênior para integrar nossa equipe na gerência de Transformação de Cadastro de Clientes. Este profissional será fundamental para o desenvolvimento e manutenção de pipelines de dados em um ambiente Azure, utilizando as melhores práticas de engenharia de dados.

Sua Missão:

• Desenvolver e manter pipelines/esteiras de dados em Azure com Databricks.
• Implementar pipelines automatizados para ingestão, transformação e disponibilização de dados.
• Garantir qualidade e governança dos dados em todo o ciclo.
• Colaborar com times multidisciplinares para evolução da arquitetura de dados.
• Tratar altos volumes de dados cadastrais.
• Monitorar indicadores e qualidade das entregas.
• Automatizar processos e consultas.
• Analisar dados para identificar problemas e propor soluções.

Responsabilidades e Atribuições:

• Desenvolvimento de Pipelines: Criar e manter pipelines de dados (ETL/ELT) em ambiente Azure, utilizando Databricks para processamento e integração.
• Automação de Deploys: Implementar práticas de CI/CD para automação de deploys e versionamento de código em GitHub.
• Modelagem de Dados: Projetar e otimizar modelos de dados para garantir escalabilidade, performance e governança.
• Migração para Cloud: Apoiar projetos de migração para cloud, garantindo segurança, qualidade e integridade dos dados.
• Colaboração com Times: Trabalhar em conjunto com times de negócio e ciência de dados para o deploy de modelos de IA em ambiente cloud.
• Qualidade dos Dados: Garantir a qualidade e consistência dos dados, aplicando técnicas de data profiling e monitoramento.
• Documentação: Documentar processos, arquiteturas e boas práticas de engenharia de dados.

Requisitos e Qualificações:

• Experiência sólida em Azure Data Services, Databricks e PySpark.
• Domínio de Python e SQL para manipulação e transformação de dados.
• Conhecimento em CI/CD e versionamento com GitHub.
• Domínio de processos de ETL/ELT.
• Experiência em modelagem de dados (conceitual, lógica e física).
• Atuação com Microsoft Azure: ADF, Synapse, Data Lake Storage e Spark.
• Familiaridade com Git/GitHub e Azure DevOps para versionamento e automação de deploys.
• Vivência em projetos de migração para cloud e integração de grandes volumes de dados.
• Desejável experiência com deploy de modelos de IA e uso de ferramentas como Azure ML.

Diferenciais:

• Experiência em projetos de IA e automação de pipelines.
• Conhecimento em arquiteturas orientadas a dados e boas prática de governança.
• Participação em iniciativas de MDM (Master Data Management).
• Familiaridade com Databricks MLflow para gestão de modelos.
• Atuação em ambientes Data Lake e Data Warehouse.

Benefícios:

• Plano de saúde e odontológico;
• Vale alimentação e refeição;
• Licença parental estendida;
• Parceria com academias e profissionais de saúde e bem-estar via Wellhub (Gympass) TotalPass;
• Participação nos Lucros e Resultados (PLR);
• Plataforma de aprendizagem contínua (CI&T University);
• Plataforma online gratuita dedicada à promoção da saúde física, mental e bem-estar;
• Curso gestante e parentalidade responsável;
• E muitos outros

Mais detalhes sobre os nossos benefícios aqui: https://ciandt.com/br/pt-br/carreiras

Na CI&T, a inclusão começa no primeiro contato. Se você é pessoa com deficiência, é importante apresentar o seu laudo durante o processo seletivo. Consulte quais dados são necessários conter no laudo clicando aqui. Assim, podemos garantir o suporte e as adaptações que você merece. Se ainda não tem o laudo caracterizador, não se preocupe: podemos te apoiar para obtê-lo.

Temos um time dedicado de Saúde e Bem-estar, especialistas em inclusão e grupos de afinidade que estarão com você em todas as etapas. Conte com a gente para fazer essa jornada lado a lado.