Modelo de trabalho: 100% remoto Contratação: CLT Inglês: Avançado com capacidade para conversação e interação profissional com equipes indianas. Estamos em busca de um(a) Engenheiro(a) DevOps/DataOps Sênior para atuar na construção, evolução e sustentação de esteiras CI/CD de uma plataforma Enterprise Lakehouse baseada em Databricks.
Principais responsabilidades:
- Projetar, implementar e evoluir pipelines CI/CD para Databricks.
- Automatizar deploys entre ambientes de desenvolvimento, homologação e produção.
- Padronizar empacotamento e implantação de workloads utilizando Databricks Asset Bundles.
- Implementar e manter infraestrutura como código com Terraform.
- Definir estratégias de branching, versionamento, releases e rollback.
- Implementar testes automatizados, validações de qualidade e controles de governança.
- Administrar permissões, políticas de clusters, secrets e objetos do Unity Catalog.
- Promover boas práticas de engenharia de software e apoiar tecnicamente as equipes.
Requisitos obrigatórios:
- Mínimo de 5 anos de experiência em DevOps ou DataOps.
- Experiência na construção de pipelines CI/CD de ponta a ponta.
- Domínio de Jenkins, incluindo deploy, rollback e versionamento.
- Experiência sólida com Git, branching strategies, pull requests e code review.
- Experiência com Databricks Asset Bundles, Databricks CLI e Repos.
- Python avançado, incluindo modularização, empacotamento de bibliotecas (wheel) e publicação de artefatos.
- Experiência com testes unitários e de integração utilizando pytest ou ferramentas equivalentes.
- Conhecimento de Terraform, incluindo provider Databricks.
- Experiência com AWS ou Azure em plataformas de dados.
Diferenciais:
- Experiência em migração de Data Warehouse legado para Lakehouse.
- Administração de workspaces, clusters, jobs e workflows no Databricks.
- Conhecimento de Unity Catalog, RBAC, governança e auditoria.
- SQL para validação e troubleshooting de pipelines.
- Experiência com Datadog ou ferramentas de observabilidade equivalentes.