backend developer for AI tracing data

Langfuse; Deutschland; On-site; EUR 90,000 - 150,000; Full time

Benefits offered by this job

Employer healthcare contributions

Stock options for every new team

Job summary

Langfuse, входящий в экосистему ClickHouse, набирает команду для развития инфраструктурной части и ingestion пайплайна на высокую пропускную способность. В открытый исходный код и распределённые системы, вы будете проектировать схемы ClickHouse, настраивать агрегацию данных и писать аналитические запросы для дашбордов и UI.

Требуется сильный бэкенд-инженер и опыт с аналитическими БД/датапайплайнами; знание TypeScript и SQL обязательно.

Qualifications

• Требуется сильная back-end инженерия и интерес к устройству баз данных, запросной оптимизации и распределённых систем
• Опыт работы с аналитическими базами данных, конвейерами данных или системами с высокой пропускной способностью
• Умение читать и писать на TypeScript и SQL
• Способность работать самостоятельно, с чётким мнением о том, что и как развивать
• Интерес к open-source софту и обсуждению масштабирования
• Умение работать в небольшой ответственной команде
• CS или количественное образование предпочитается
• Будет плюсом: ClickHouse, другие OLAP базы данных, инфра наблюдаемость, опыт основателя, опыт создания data-intensive систем

Responsibilities

• Владение и оптимизация пайплайна ingest на пропускную способность, задержку, надёжность и стоимость
• Проектирование схем ClickHouse, оптимизация стратегий merge, настройка пакетных вставок и написание аналитических запросов
• Создание инфраструктурно-ёмких функций: асинхронная обработка LLM как судьи, масштабируемые алёрты, выполнение клиентского кода и пакетовые операции над датасетами
• Запуск нагрузочных тестов на прод данные для проверки схем, миграций и оптимизаций запросов
• Планирование инфраструктурных потребностей по мере роста продукта, включая обзорность агентов в реальном времени
• Операционное управление Langfuse Cloud в нескольких прод средах и поддержка развёртываний от Docker Compose до Helm

Skills

Backend engineering

Distributed systems

Query optimization

TypeScript

SQL

Open-source

Self-organization

Team collaboration

CS/Quant degree

Education

CS or quantitative degree preferred

Tools

ClickHouse

OLAP databases

Observability infra

Docker/Helm

TypeScript

SQL

Job description

Описание:

Langfuse ingests terabytes of AI tracing data per day and provides open-source infrastructure for processing and observing that data. It is part of ClickHouse.

Задачи:

• Own and optimize the ingestion pipeline for throughput, latency, reliability, and cost efficiency
• Design ClickHouse schemas, optimize merge strategies, tune batch inserts, and write and review analytical queries for dashboards and the UI
• Build infrastructure-heavy features, including asynchronous LLM-as-a-Judge processing, large-scale alerting, client-code execution, and batch dataset operations
• Run load tests against production data to validate schema, migration, and query optimizations
• Plan for infrastructure needs as the product scales, including long-running agent observability and real-time evaluation
• Operate Langfuse Cloud across multiple production environments and support deployments from Docker Compose to enterprise-grade Helm charts

Требования:

• Strong backend engineering skills and interest in database internals, query optimization, and distributed systems
• Experience with analytical databases, data pipelines, or high-throughput event processing
• Comfortable reading and writing TypeScript and SQL
• Self-organized, with strong opinions about what to build and how to ship it
• Interested in open-source software and enjoys discussing users’ scaling challenges
• Thrives in a small, accountable team
• A CS or quantitative degree is preferred
• Будет плюсом: ClickHouse, other OLAP databases, or observability infrastructure experience, experience as a founder, experience building data-intensive systems at scale

Условия:

• Employer healthcare contributions
• Stock options for every new team member
• Flexible time off in the US and generous entitlement in other countries
• USD$500 home office setup allowance for remote employees
• Opportunities to connect with colleagues at company-wide offsites