Uma plataforma de recrutamento está em busca de um profissional de engenharia de dados para projetar e implementar pipelines de validação de dados em um ambiente remoto. O candidato ideal terá experiência com Python, ferramentas AWS, e habilidades em MLOps. Este papel requer colaboração com equipes de Data Science e Engenharia de Dados, garantindo boas práticas de monitoração e testes automatizados.
Qualificações
Experiência sólida com engenharia de software aplicada a dados e machine learning.
Proficiência em Python e frameworks como PySpark, Pandas, Scikit-learn ou similares.
Experiência com ferramentas e serviços AWS, como S3, Lambda, e SageMaker.
Capacidade de escrever código limpo, modular e testável.
Responsabilidades
Projetar e implementar pipelines de validação de dados e avaliação de modelos em ambiente cloud.
Integrar dados e métricas de avaliação em um fluxo automatizado e auditável.
Trabalhar em colaboração com times de Data Science e Engenharia de Dados.
Conhecimentos
Engenharia de software
Python
AWS (S3, Lambda, etc.)
MLOps
CI/CD
Orquestração de workflows
Código limpo
Descrição da oferta de emprego
Requisitos
Experiência sólida com engenharia de software aplicada a dados e machine learning.
Proficiência em Python e frameworks como PySpark, Pandas, Scikit-learn ou similares.
Experiência com ferramentas e serviços AWS, como S3, Lambda, Step Functions, Glue, Athena, SageMaker ou ECS. Conhecimento em MLOps e CI / CD para pipelines de dados e modelos.
Experiência com orquestração de workflows.
Capacidade de escrever código limpo, modular e testável.
Diferenciais
Experiência com infraestrutura como código (Terraform, CloudFormation).
Participação em projetos de ML em produção com foco em confiabilidade e rastreabilidade.
Responsabilidades principais
Projetar e implementar pipelines de validação de dados e avaliação de modelos em ambiente cloud (AWS).
Integrar dados e métricas de avaliação em um fluxo automatizado e auditável.
Modularizar o pipeline para facilitar reuso, testes e manutenção.
Trabalhar em colaboração com times de Data Science, Engenharia de Dados e Produto.
Garantir boas práticas de versionamento, logging, monitoramento e testes automatizados.
Propor melhorias contínuas na arquitetura de dados e nos processos de validação.
Modelo de atuação
Remoto
Obtém a tua avaliação gratuita e confidencial do currículo.
ou arrasta um ficheiro em formato PDF, DOC, DOCX, ODT ou PAGES até 5 MB.
Estava farto de enviar currículos sem obter resposta até usar a JobLeads. Fizeram com que fosse impossível aos recrutadores ficarem indiferentes ao meu currículo.
Sophie Reynolds
A avaliação de currículo da JobLeads ajudou-me a corrigir erros críticos e comecei a receber convites para entrevistas quase imediatamente!
Daniel Fischer
Com a avaliação de currículo da JobLeads, o meu currículo deixou de ser ignorado e passou a conseguir-me entrevistas de emprego em menos de nada!