SWE-Bench Task Auditor
- Compenso: da 70 USD a 90 USD / ora
- Contratto: Freelance
- Chi può candidarsi: Stati Uniti
- Pubblicata il 28 ago 2026
In breve
Cerchi un lavoro da remoto come SWE-Bench Task Auditor su Mercor? Questa posizione freelance offre una paga compresa tra 70 e 90 USD all'ora per valutare compiti di benchmark di ingegneria software.
Cosa farai
- Esaminare la qualità, la correttezza e la riproducibilità dei compiti di benchmark
- Analizzare compiti a livello di repository, patch di riferimento e test harness
- Verificare l'integrità della valutazione e fornire feedback scritti basati su criteri specifici
Cosa ti serve per candidarti
- Almeno 3 anni di esperienza professionale nello sviluppo software
- Esperienza reale con contributi o ruoli di maintainer in progetti open-source
- Competenza nella revisione di patch di riferimento, test runner e isolamento Docker
- Fluenza in Python e in almeno un linguaggio tra Java, Go, TypeScript o C++
Chi può candidarsi
Possono candidarsi i residenti negli Stati Uniti per questo ruolo di lavoro da remoto.
Il mio consiglio
Ti consigliamo di evidenziare chiaramente i tuoi contributi open-source e la tua esperienza con Python nel tuo profilo prima di inviare la candidatura.