← सभी जॉब्स पर वापस जाएँ
Mercorफ़ाइनेंस और अकाउंटिंगसत्यापित 9 घंटे पहले

AI मूल्यांकन रूब्रिक ऑडिटर

स्थान: रिमोटपात्र स्थान: दुनिया भर मेंकॉन्ट्रैक्ट का प्रकार: कॉन्ट्रैक्टवेतन: $60 – $85/hप्रकाशित: 17 नवंबर 2026
अभी आवेदन करें →
Check my CV for this role

Free. See how your CV fits this role before you apply.

वेतन

$60 – $85/h

कौन आवेदन कर सकता है

प्लेटफ़ॉर्म ने किसी देश पर प्रतिबंध नहीं बताया · 17 नवंबर 2026 को जाँचा गया

जाँचा गया

हमने इस रोल को प्लेटफ़ॉर्म पर 9 घंटे पहले जाँचा और हर दिन फिर से जाँचते हैं।

भूमिका के बारे में

Flash, Mercor के माध्यम से भर्ती करते हुए, यथार्थवादी शॉपिंग और डिलीवरी टास्क पर AI एजेंटों का परीक्षण कर रहा है। प्रोजेक्ट ऑडिटर के रूप में आप रिव्यूअर्स से ऊपर होते हैं: आप उनके पूरे किए गए टास्क का ऑडिट करते हैं और तय करते हैं कि उन्होंने जिन रूब्रिक विफलताओं की पुष्टि की है, वे उचित हैं या नहीं।

आप क्या करेंगे

  • प्रॉम्प्ट और ग्रेडिंग मूल्यांकन रूब्रिक सहित पूरे टास्क का ऑडिट करना
  • जाँचना कि एजेंट को जिस जानकारी की ज़रूरत थी, वह उपलब्ध थी या नहीं
  • पुष्टि करना कि मूल्यांकन रूब्रिक वही मापता है जो प्रॉम्प्ट ने वास्तव में पूछा था
  • ऐसे मामले पकड़ना जहाँ किसी सही उत्तर को गलत ग्रेड किया गया होता
  • प्रोजेक्ट दिशानिर्देशों के अनुसार मूल्यांकन रूब्रिक की संरचना की जाँच करना
  • रिव्यूअर्स को प्रॉम्प्ट और मूल्यांकन रूब्रिक की समस्याओं पर फ़ीडबैक देना

आवश्यकताएँ

  • LLM मूल्यांकन के लिए मूल्यांकन रूब्रिक लिखने या रिव्यू करने का अच्छा-ख़ासा अनुभव (अपने आवेदन में प्रोजेक्ट्स की सूची दें)
  • लेखकों या रिव्यूअर्स को फ़ीडबैक देने का अनुभव
  • नियमित उपलब्धता
  • लंबे एजेंट ट्रांसक्रिप्ट पढ़ने और यह पता लगाने की क्षमता कि वे कहाँ गलत हुए
  • सटीक लेखन और संदर्भ उत्तर पर भरोसा करने के बजाय डेटा की जाँच करने की आदत

पारिश्रमिक और शर्तें

  • $60 से $85 प्रति घंटा
  • पूरी तरह रिमोट; किसी स्थान प्रतिबंध का उल्लेख नहीं है

मिलती-जुलती भूमिकाएँ ईमेल पर पाएँ

हर हफ़्ते एक ईमेल, इस जैसी नई भूमिकाओं के साथ, क्षेत्र और पे के हिसाब से छनी हुई। मुफ़्त, कोई स्पैम नहीं।

संबंधित भूमिकाएँ

Mercor
Mercor

AI मूल्यांकन रूब्रिक समीक्षक

AI एजेंट मूल्यांकन प्रोजेक्ट के लिए AI द्वारा तैयार किए गए शॉपिंग और डिलीवरी टास्क, उनके ग्रेडिंग रूब्रिक और मॉडल के प्रयासों की समीक्षा करें और अनुचित मानदंड ठीक करें। रिमोट, $40-$75/घंटा।

रिमोट · दुनिया भर में·कॉन्ट्रैक्ट·$40 – $75/h
Mercor
Mercor

इंश्योरेंस एजेंसी सर्विस / अकाउंट मैनेजमेंट लीड – सशुल्क रिसर्च इंटरव्यू

Mercor अमेरिकी इंश्योरेंस एजेंसियों के सर्विस और अकाउंट मैनेजमेंट लीड्स के साथ AMS वर्कफ़्लो पर एक घंटे का सशुल्क रिसर्च इंटरव्यू कर रहा है। रिमोट, केवल अमेरिका, $380 तय राशि।

रिमोट · संयुक्त राज्य·कॉन्ट्रैक्ट
Mercor
Mercor

इंश्योरेंस एजेंसी ऑपरेशंस और फ़ाइनेंस लीडर – सशुल्क रिसर्च इंटरव्यू

Mercor अमेरिकी इंश्योरेंस एजेंसियों के ऑपरेशंस और फ़ाइनेंस लीडर्स के साथ एजेंसी मैनेजमेंट सॉफ़्टवेयर पर एक घंटे का सशुल्क रिसर्च इंटरव्यू कर रहा है। रिमोट, केवल अमेरिका, $380 तय राशि।

रिमोट · संयुक्त राज्य·कॉन्ट्रैक्ट