Formateur d'IA senior (H/F)

À propos du poste

Intitulé du poste : Formateur d'IA senior
Type de poste : Prestataire indépendant, à distance
Lieu : Amérique du Nord et Europe.

micro1 recrute des formateurs d'IA senior pour collaborer à un projet mené pour un client, visant à améliorer la qualité des systèmes d'IA grâce à un entraînement et une évaluation de modèles de niveau expert. Dans ce rôle, vous mettrez votre expertise de généraliste et votre expérience concrète des produits d'IA au service de l'entraînement des systèmes d'IA de nouvelle génération. Votre travail influencera la manière dont les modèles apprennent, raisonnent et performent grâce à des contributions concrètes de grande qualité.

Vos missions

• Évaluer les performances d'outils de chat et de recherche par IA dans des conditions standardisées et reproductibles.
• Appliquer des consignes de notation détaillées pour évaluer, classer et annoter avec précision les réponses des modèles, en fournissant des retours structurés qui améliorent les performances du modèle.
• Rédiger, affiner et soumettre à des tests de résistance des prompts qui sondent les capacités des modèles, en veillant à couvrir des scénarios variés, des cas limites et différentes intentions d'utilisateurs.
• Vérifier la cohérence et la justesse des évaluations, en corrigeant les écarts entre les notes et la grille d'évaluation ou les consignes sous-jacentes.
• Utiliser des outils et plateformes d'entraînement d'IA pour consigner les résultats et soumettre des jeux de données d'évaluation conformes aux standards et aux jalons du projet.
• Collaborer avec les formateurs et contributeurs du projet pour lever les ambiguïtés, affiner les consignes et garantir la cohérence des évaluations au sein de l'équipe.
• Participer aux revues de qualité continues et intégrer les retours afin de maintenir des standards rigoureux d'entraînement et d'annotation.

Profil recherché

• Souci exceptionnel du détail et de la justesse dans la révision et l'évaluation de contenus générés par l'IA.

• Excellentes compétences de communication écrite et orale pour collaborer efficacement, rendre compte et informer en temps utile de l'avancement et des difficultés.

• Gestion du temps et sens de l'organisation démontrés pour participer à un projet de manière autonome et à distance.

• Esprit analytique et goût de la résolution de problèmes, avec une approche proactive face aux difficultés d'évaluation.

• Expérience avérée de l'entraînement de modèles d'IA, du RLHF (apprentissage par renforcement à partir de retours humains), de l'étiquetage de données ou de projets d'évaluation similaires centrés sur les données.

• Connaissance des produits et outils d'IA, y compris le prompt engineering et la compréhension du comportement et des limites des modèles.

• Expérience de la rédaction de grilles d'évaluation, de la notation de sorties de modèles ou de la révision de réponses d'IA en termes de justesse, d'utilité et de sécurité.

• Expérience en entraînement d'IA, en préparation de données de machine learning ou sur des projets axés sur les LLM (fortement appréciée).