← Retour à toutes les offres
MercorFinance et comptabilitéVérifiée il y a 4 heures

Réviseur de grilles d'évaluation d'IA (H/F)

Lieu: À distancePays éligibles: Dans le monde entierType de contrat: ContratRémunération: $40 – $75/hPubliée le: 17 novembre 2026
Postuler maintenant →
Check my CV for this role

Free. See how your CV fits this role before you apply.

Paie

$40 – $75/h

Qui peut postuler

Aucune restriction de pays indiquée par la plateforme · vérifié le 17 novembre 2026

Vérifiée

Nous avons vérifié cette offre sur la plateforme il y a 4 heures et la revérifions chaque jour.

À propos du poste

Flash, qui recrute via Mercor, teste des agents d'IA sur des tâches réalistes d'achat et de livraison. En tant que réviseur de grilles d'évaluation, vous vérifiez si chaque échec enregistré est réellement juste envers le modèle, et vous corrigez la notation lorsque ce n'est pas le cas.

Vos missions

  • Relire des tâches rédigées par l'IA (prompt et grille d'évaluation) ainsi que les tentatives des modèles
  • Vérifier si les informations nécessaires étaient réellement accessibles à l'agent
  • Confirmer que la grille évalue bien ce que le prompt demandait réellement
  • Repérer les cas où une réponse valide aurait été jugée fausse
  • Vérifier que la structure de la grille respecte les consignes du projet
  • Corriger les critères injustes, signaler les tâches irrécupérables et rédiger une courte note justifiant chaque décision

Profil recherché

  • Solide expérience de la rédaction ou de la relecture de grilles d'évaluation pour des évaluations de LLM (indiquez les projets dans votre candidature)
  • Capacité à lire de longues transcriptions d'agents et à identifier précisément où les choses ont mal tourné
  • Rédaction précise et réflexe de vérifier les données plutôt que de se fier à la réponse de référence

Rémunération et modalités

  • De $40 à $75 de l'heure
  • Entièrement à distance ; aucune restriction géographique n'est indiquée

Recevez des offres similaires par email

Un email hebdomadaire avec de nouvelles offres comme celle-ci, filtrées par domaine et rémunération. Gratuit, sans spam.

Postes similaires

Mercor
Mercor

Auditeur de grilles d'évaluation IA (H/F)

Auditez le travail des relecteurs sur des tâches d'achat et de livraison réalisées par des agents d'IA, vérifiez que les échecs sur la grille d'évaluation sont justifiés et faites des retours aux relecteurs. À distance, $60-$85/h.

À distance · Dans le monde entier·Contrat·$60 – $85/h