Engenheiro(a) de Machine Learning Sênior (Monitoramento de Modelos na Educação)

Sylision

United States

Remote

USD 120,000 - 180,000

Full time

13 days ago

Get a reply from this recruiter

Your resume and cover letter, tailored to exactly what they’re hiring for.

Get past ATS filters

Benefits offered by this job

Ambiente colaborativo
Trabalho remoto
Conexão global
Saúde física

Job summary

Sylision está buscando um Engenheiro(a) de Machine Learning Sênior para monitorar modelos educacionais em produção e garantir que falhas sejam detectadas antes de impactar a prática pedagógica. O papel envolve definir métricas de deriva, construir dashboards e políticas de retreinamento com gatilhos e validação, mantendo a operação sem interrupções.

O candidato ideal tem experiência com modelos tabulares (scikit-learn, XGBoost), Airflow e MLflow, além de habilidades em SQL e monitoramento de

Qualifications

  • Modelos tabulares com scikit-learn e XGBoost em produção.
  • Conhecimento de deriva de dados e de conceito, com testes estatísticos adequados.
  • Orquestração de pipelines com Airflow.
  • MLflow ou ferramenta similar para registro e versionamento.
  • SQL para análise de dados de produção.
  • Capacidade de definir padrões e de ensinar quem está começando.

Responsibilities

  • Definir métricas de deriva de dados e de previsão por modelo, com limites calibrados contra a sazonalidade escolar.
  • Montar rotinas no Airflow que calculam as métricas e gravam o histórico.
  • Estimar desempenho antes da chegada do rótulo, com sinais intermediários.
  • Construir o painel e os alertas, ajustando-os para evitar falso alarme.
  • Automatizar o retreino com validação, comparação ao modelo atual e reversão.
  • Registrar modelos, dados e métricas no MLflow.
  • Conduzir a análise de causa dos incidentes de degradação.
  • Definir o padrão de monitoramento que cada novo modelo precisa cumprir antes de ir ao ar.

Skills

Python
Data drift detection
Model monitoring
Airflow
SQL
MLflow
Docker
Git

Tools

Airflow
MLflow
SQL
Python
Docker
Git

Job description

Vaga aberta de Engenheiro(a) de Machine Learning Sênior (Monitoramento de Modelos na Educação). A empresa contratante é confidencial neste anúncio, e a seleção é conduzida pela Sylision.

Nível: senior.

Modelo de trabalho: 100% Remoto.

Contratação: tempo integral, CLT ou PJ.

Sobre a vaga:

Uma plataforma de educação mantém modelos que preveem evasão de alunos, nível de dificuldade de exercícios e probabilidade de conclusão de curso. Eles foram treinados em um semestre e seguem em produção em outro, com alunos diferentes, novos cursos e um calendário que muda tudo em janeiro e em julho. Você vai garantir que esses modelos sejam vigiados e que se saiba quando deixam de funcionar.

O monitoramento tem camadas. Deriva de entrada, quando a distribuição de uma variável muda. Deriva de saída, quando as previsões passam a se concentrar numa faixa. E a pior, queda de desempenho, que só aparece quando o rótulo chega, semanas depois. Como o rótulo demora, é preciso sinais intermediários e um desenho de alerta que não dispare todo dia por ruído sazonal.

Você constrói a rotina que calcula essas métricas, o painel que a equipe lê e a política de retreino, com gatilho, validação e reversão. Sucesso é detectar uma degradação antes que a área pedagógica a perceba, e retreinar sem interromper o serviço. Como sênior, decide o padrão e responde pelos incidentes.

O que você vai fazer:
  • Definir métricas de deriva de dados e de previsão por modelo, com limites calibrados contra a sazonalidade escolar
  • Montar rotinas no Airflow que calculam as métricas e gravam o histórico
  • Estimar desempenho antes da chegada do rótulo, com sinais intermediários
  • Construir o painel e os alertas, ajustando-os para evitar falso alarme
  • Automatizar o retreino com validação, comparação ao modelo atual e reversão
  • Registrar modelos, dados e métricas no MLflow
  • Conduzir a análise de causa dos incidentes de degradação
  • Definir o padrão de monitoramento que cada novo modelo precisa cumprir antes de ir ao ar
Requisitos:
  • Modelos tabulares com scikit-learn e XGBoost em produção
  • Conhecimento de deriva de dados e de conceito, com testes estatísticos adequados
  • Orquestração de pipelines com Airflow
  • MLflow ou ferramenta similar para registro e versionamento
  • SQL para análise de dados de produção
  • Capacidade de definir padrões e de ensinar quem está começando
Diferenciais:
  • Ferramentas de monitoramento como Evidently
  • Experiência com sazonalidade acadêmica em dados
  • Implantação com contêineres e testes de carga
  • Teste de modelo desafiante em sombra
  • Noção de equidade entre grupos de alunos
Como é trabalhar aqui:

Vaga 100% remota, com contratação CLT, para cliente da Sylision com sede em São Paulo, SP. Cada modelo em produção tem uma ficha com dono, métricas e plano de retreino, e é revisada em ciclo fixo. Incidentes viram texto curto, sem culpado, com ação definida.

Benefícios oferecidos pela empresa contratante:
  • Ambiente colaborativo, com senso de comunidade e conquistas celebradas em equipe
  • Trabalhe de qualquer lugar, com liberdade e flexibilidade
  • Conexão global: convivência com times de diferentes países e culturas
  • Apoio à saúde física com TotalPass e Mediquo
  • Cuidado com a saúde mental pelo programa Team Care
  • Contratação e jornada definidas com a empresa contratante
Tecnologias envolvidas:
  • Python
  • scikit-learn
  • XGBoost
  • MLflow
  • SQL
  • Airflow
  • Monitoramento de modelos
  • Docker
  • Git
Get your free, confidential resume review.

or drag and drop your file here.

Similar jobs

Similar jobs worth comparing

Engenheiro(a) de Machine Learning Sênior (Monitoramento de Modelos em Recursos Humanos)
Engenheiro(a) de Machine Learning Sênior (Monitoramento de Modelos em Recursos Humanos)

Sylision • United States

Remote
USD 140,000 - 210,000
Ambiente colaborativo
Trabalhe de qualquer lugar
Conexão global
+3
Engenheiro(a) de Machine Learning Pleno (MLOps e Deploy de Modelos na Educação)
Engenheiro(a) de Machine Learning Pleno (MLOps e Deploy de Modelos na Educação)

Sylision • United States

Remote
USD 16,000 - 31,000
Engenheiro(a) de Machine Learning Sênior (Monitoramento de Modelos no E-commerce)
Engenheiro(a) de Machine Learning Sênior (Monitoramento de Modelos no E-commerce)

Sylision • United States

Remote
USD 55,000 - 94,000
Trabalho 100% remoto
Conexão global com times de vários paí
Treinamento em MLflow e monitoramento
Engenheiro(a) de Machine Learning Sênior (Monitoramento de Modelos na Logística)
Engenheiro(a) de Machine Learning Sênior (Monitoramento de Modelos na Logística)

Sylision • United States

Remote
USD 46,000 - 71,000
Trabalho remoto 100%
Contrato CLT ou PJ
Benefícios de saúde
Engenheiro(a) de Machine Learning Sênior (Monitoramento de Modelos em Mobilidade Urbana)
Engenheiro(a) de Machine Learning Sênior (Monitoramento de Modelos em Mobilidade Urbana)

Sylision • United States

Remote
USD 33,000 - 47,000
Remoto 100%
Ambiente colaborativo
Flexibilidade
+2
Engenheiro(a) de Machine Learning Sênior (MLOps e Deploy de Modelos no E-commerce)
Engenheiro(a) de Machine Learning Sênior (MLOps e Deploy de Modelos no E-commerce)

Sylision • United States

Remote
USD 37,000 - 61,000
Ambiente colaborativo
Trabalhe de qualquer lugar
Conexão com times globais
+2
Engenheiro(a) de Machine Learning Sênior (MLOps e Deploy de Modelos na Logística)
Engenheiro(a) de Machine Learning Sênior (MLOps e Deploy de Modelos na Logística)

Sylision • United States

Remote
USD 33,000 - 47,000
Ambiente colaborativo
Trabalhe de qualquer lugar
Conexão global
+4
Engenheiro(a) de Machine Learning Sênior (MLOps e Deploy de Modelos em Mobilidade Urbana)
Engenheiro(a) de Machine Learning Sênior (MLOps e Deploy de Modelos em Mobilidade Urbana)

Sylision • United States

Remote
USD 140,000 - 180,000
Trabalhe de qualquer lugar
TotalPass e Mediquo
Team Care
+2
Engenheiro(a) de Machine Learning Pleno (Monitoramento de Modelos no Setor de Energia)
Engenheiro(a) de Machine Learning Pleno (Monitoramento de Modelos no Setor de Energia)

Sylision • United States

Remote
USD 22,000 - 37,000
Trabalho remoto
Flexibilidade
Saúde
+1
Engenheiro(a) de Machine Learning Sênior (Manutenção Preditiva no Mercado Imobiliário)
Engenheiro(a) de Machine Learning Sênior (Manutenção Preditiva no Mercado Imobiliário)

Sylision • United States

Remote
USD 120,000 - 180,000