Lead LLM Evaluation & Benchmark Engineer

Effectief Altruisme; Amsterdam; Vor Ort; EUR 60.000 - 100.000; Vollzeit

Zusammenfassung

Leidinggevende engineering voor reproduceerbare evaluaties van LLM's, benchmarks en experimenteninfrastructuur voor AI-waarden en multi-agent onderzoek.

Of een taalmodel doet wat mensen ervan verwachten, kun je alleen vaststellen met tests die kloppen en die een ander kan herhalen. Als research engineer bouw je die tests: eerst voor de onderzoekers van Aithos, en via gepubliceerde code ook voor teams elders die werken aan AI-veiligheid en hun eigen onderzoek erop voortbouwen.

Jobbeschreibung

Leidinggevende engineering voor reproduceerbare evaluaties van LLM's, benchmarks en experimenteninfrastructuur voor AI-waarden en multi-agent onderzoek.

Of een taalmodel doet wat mensen ervan verwachten, kun je alleen vaststellen met tests die kloppen en die een ander kan herhalen. Als research engineer bouw je die tests: eerst voor de onderzoekers van Aithos, en via gepubliceerde code ook voor teams elders die werken aan AI-veiligheid en hun eigen onderzoek erop voortbouwen.