python developer for AI and ML systems

HireHi; United States; Remote; USD 120,000 - 160,000; Full time

Job summary

HireHi ищет опытного инженера бэкенда с фокусом на AI/ML для управления развёртыванием агентов от разработки до продакшена, включая контроль качества и автоматизацию.

Кандидат будет планировать окружения, реализовывать откаты, работать с AWS AgentCore и участвовать в тестах регрессии и безопасности, обеспечивая надёжность выпусков. Опыт canary/blue-green развёртываний и мониторинга обязателен.

Qualifications

• 3+ года инженерии платформы или бэкенда в AI/ML системах
• Опыт развёртывания в нескольких окружениях и процессов продвижения
• Опыт с откатом и безопасной валидацией
• Опыт с Python
• Опыт AWS AgentCore Evaluation API
• Опыт регрессионного тестирования агентов
• Опыт blue-green или canary деплоймента для LLМ агентов
• Мониторинг работоспособности агентов после развёртывания

Responsibilities

• Разработка автоматизации Python для жизненного цикла агентов
• Планирование и поддержка progression workflows от разработки к продакшену
• Реализация оценки порога верификации для продвижения на QA и в прод
• Разработка откатов до предыдущих версий с проверками
• Валидация откатов через health checks и smoke tests
• Управление AWS AgentCore Runtime endpoints через алиасы
• Запуск evaluation suites против нескольких версий агентов
• Сотрудничество по контролю качества для работы с PII безопасности и точности рабочих процессов

Skills

Python

AI/ML

Backend engineering

AWS

AgentCore API

Canaries

Blue-green

Regression testing

Health monitoring

Deployment pipelines

Tools

AgentCore

Evaluation API

Job description

Описание: The project manages AI agent deployments from development to production with validation and quality controls. It automates promotions, rollbacks, endpoint management, and regression detection to improve release confidence.

Задачи:

Develop Python automation for agent lifecycle operations; Plan and maintain environment progression workflows from development to production; Implement evaluation gate enforcement for promotions to QA and production; Develop rollback mechanisms to revert production agents to previous versions; Validate rollbacks with health checks and smoke tests; Manage AWS AgentCore Runtime endpoints using default and named aliases; Run evaluation suites against multiple agent versions to detect regressions; Collaborate on quality checks for PII safety and workflow accuracy.

Требования:

3+ Years of platform or backend engineering with AI and ML systems; Experience with multi-environment deployment and promotion workflows; Experience with rollback automation and safety validation; Experience with quality gate enforcement in deployment pipelines; Experience with Python; Hands-on experience with AWS AgentCore Evaluation API; Experience with agent regression testing and version comparison; Experience with blue-green or canary deployment patterns for LLM agents; Experience with agent health monitoring after deployment.

Условия:

No conditions specified