← सभी जॉब्स पर वापस जाएँ
Mercorफ़ाइनेंस और अकाउंटिंगसत्यापित 9 घंटे पहले

AI मूल्यांकन रूब्रिक समीक्षक

स्थान: रिमोटपात्र स्थान: दुनिया भर मेंकॉन्ट्रैक्ट का प्रकार: कॉन्ट्रैक्टवेतन: $40 – $75/hप्रकाशित: 17 नवंबर 2026
अभी आवेदन करें →
Check my CV for this role

Free. See how your CV fits this role before you apply.

वेतन

$40 – $75/h

कौन आवेदन कर सकता है

प्लेटफ़ॉर्म ने किसी देश पर प्रतिबंध नहीं बताया · 17 नवंबर 2026 को जाँचा गया

जाँचा गया

हमने इस रोल को प्लेटफ़ॉर्म पर 9 घंटे पहले जाँचा और हर दिन फिर से जाँचते हैं।

भूमिका के बारे में

Flash, Mercor के माध्यम से भर्ती करते हुए, AI एजेंट्स को वास्तविक शॉपिंग और डिलीवरी टास्क पर टेस्ट कर रहा है। रूब्रिक समीक्षक के रूप में आप जाँचते हैं कि दर्ज की गई हर विफलता मॉडल के साथ वास्तव में उचित है या नहीं, और जहाँ नहीं है वहाँ ग्रेडिंग ठीक करते हैं।

आप क्या करेंगे

  • AI द्वारा तैयार किए गए टास्क (प्रॉम्प्ट और ग्रेडिंग रूब्रिक) की मॉडल के प्रयासों के साथ समीक्षा करें
  • जाँचें कि आवश्यक जानकारी वास्तव में एजेंट को उपलब्ध थी या नहीं
  • पुष्टि करें कि रूब्रिक वही ग्रेड करता है जो प्रॉम्प्ट ने वास्तव में माँगा था
  • ऐसे मामले पहचानें जहाँ एक मान्य उत्तर को गलत माना गया होता
  • सत्यापित करें कि रूब्रिक की संरचना प्रोजेक्ट दिशानिर्देशों का पालन करती है
  • अनुचित मानदंड ठीक करें, जिन टास्क को बचाया नहीं जा सकता उन्हें फ़्लैग करें और हर फ़ैसले को समझाते हुए एक छोटा नोट लिखें

आवश्यकताएँ

  • LLM मूल्यांकन के लिए रूब्रिक लिखने या समीक्षा करने का अच्छा-खासा अनुभव (अपने आवेदन में प्रोजेक्ट्स की सूची दें)
  • लंबे एजेंट ट्रांसक्रिप्ट पढ़ने और यह सटीक रूप से पहचानने की क्षमता कि गड़बड़ी कहाँ हुई
  • सटीक लेखन, और संदर्भ उत्तर पर भरोसा करने के बजाय डेटा जाँचने की आदत

पारिश्रमिक और शर्तें

  • $40 से $75 प्रति घंटा
  • पूरी तरह रिमोट; कोई स्थान प्रतिबंध नहीं बताया गया है

मिलती-जुलती भूमिकाएँ ईमेल पर पाएँ

हर हफ़्ते एक ईमेल, इस जैसी नई भूमिकाओं के साथ, क्षेत्र और पे के हिसाब से छनी हुई। मुफ़्त, कोई स्पैम नहीं।

संबंधित भूमिकाएँ

Mercor
Mercor

AI मूल्यांकन रूब्रिक ऑडिटर

AI एजेंट के शॉपिंग और डिलीवरी टास्क पर रिव्यूअर्स के काम का ऑडिट करें, जाँचें कि रूब्रिक विफलताएँ उचित हैं और रिव्यूअर्स को फ़ीडबैक दें। रिमोट, $60-$85/घंटा।

रिमोट · दुनिया भर में·कॉन्ट्रैक्ट·$60 – $85/h
Mercor
Mercor

इंश्योरेंस एजेंसी सर्विस / अकाउंट मैनेजमेंट लीड – सशुल्क रिसर्च इंटरव्यू

Mercor अमेरिकी इंश्योरेंस एजेंसियों के सर्विस और अकाउंट मैनेजमेंट लीड्स के साथ AMS वर्कफ़्लो पर एक घंटे का सशुल्क रिसर्च इंटरव्यू कर रहा है। रिमोट, केवल अमेरिका, $380 तय राशि।

रिमोट · संयुक्त राज्य·कॉन्ट्रैक्ट
Mercor
Mercor

इंश्योरेंस एजेंसी ऑपरेशंस और फ़ाइनेंस लीडर – सशुल्क रिसर्च इंटरव्यू

Mercor अमेरिकी इंश्योरेंस एजेंसियों के ऑपरेशंस और फ़ाइनेंस लीडर्स के साथ एजेंसी मैनेजमेंट सॉफ़्टवेयर पर एक घंटे का सशुल्क रिसर्च इंटरव्यू कर रहा है। रिमोट, केवल अमेरिका, $380 तय राशि।

रिमोट · संयुक्त राज्य·कॉन्ट्रैक्ट