← Retour à toutes les offres
MercorFinance et comptabilitéVérifiée il y a 4 heures

Auditeur de grilles d'évaluation IA (H/F)

Lieu: À distancePays éligibles: Dans le monde entierType de contrat: ContratRémunération: $60 – $85/hPubliée le: 17 novembre 2026
Postuler maintenant →
Check my CV for this role

Free. See how your CV fits this role before you apply.

Paie

$60 – $85/h

Qui peut postuler

Aucune restriction de pays indiquée par la plateforme · vérifié le 17 novembre 2026

Vérifiée

Nous avons vérifié cette offre sur la plateforme il y a 4 heures et la revérifions chaque jour.

À propos du poste

Flash, qui recrute via Mercor, teste des agents d'IA sur des tâches réalistes d'achat et de livraison. En tant qu'auditeur de projet, vous intervenez au-dessus des relecteurs : vous auditez les tâches qu'ils ont terminées et décidez si les échecs sur la grille d'évaluation qu'ils ont confirmés sont justifiés.

Vos missions

  • Auditer des tâches complètes, y compris le prompt et la grille d'évaluation
  • Vérifier si les informations dont l'agent avait besoin étaient disponibles
  • Confirmer que la grille mesure ce que le prompt demandait réellement
  • Repérer les cas où une réponse valable aurait été notée comme fausse
  • Vérifier la structure de la grille au regard des consignes du projet
  • Faire des retours aux relecteurs sur les problèmes de prompt et de grille

Profil recherché

  • Solide expérience de la rédaction ou de la relecture de grilles d'évaluation pour des évaluations de LLM (indiquez les projets dans votre candidature)
  • Expérience des retours à des rédacteurs ou à des relecteurs
  • Disponibilité régulière
  • Capacité à lire de longues transcriptions d'agents et à identifier où ils se sont trompés
  • Rédaction précise et habitude de vérifier les données plutôt que de se fier à la réponse de référence

Rémunération et modalités

  • De $60 à $85 de l'heure
  • Entièrement à distance ; aucune restriction géographique n'est indiquée

Recevez des offres similaires par email

Un email hebdomadaire avec de nouvelles offres comme celle-ci, filtrées par domaine et rémunération. Gratuit, sans spam.

Postes similaires

Mercor
Mercor

Réviseur de grilles d'évaluation d'IA (H/F)

Relisez des tâches d'achat et de livraison rédigées par l'IA, leurs grilles d'évaluation et les tentatives des modèles, en corrigeant les critères injustes pour un projet d'évaluation d'agents d'IA. À distance, $40-$75/h.

À distance · Dans le monde entier·Contrat·$40 – $75/h