टेक्निकल स्टाफ सदस्य, कोडिंग रिसर्च

भूमिका के बारे में

जॉब टाइटल: टेक्निकल स्टाफ सदस्य, कोडिंग रिसर्च जॉब का प्रकार: फ़ुल-टाइम स्थान: रिमोट

हम फ्रंटियर कोडिंग एजेंट के मूल्यांकन और विकास को आगे बढ़ाने में मदद के लिए एक टेक्निकल स्टाफ सदस्य की तलाश में हैं। AI शोध, सॉफ़्टवेयर इंजीनियरिंग और मॉडल मूल्यांकन के संगम पर काम करते हुए, आप वे बेंचमार्क, पद्धतियाँ और डेटा सिस्टम डिज़ाइन करेंगे जो तय करते हैं कि अगली पीढ़ी के कोडिंग मॉडल कैसे मापे और बेहतर किए जाते हैं।

आप क्या करेंगे

• कोडिंग एजेंट के लिए मूल्यांकन फ़्रेमवर्क डिज़ाइन करना और उनका स्वामित्व सँभालना, जिनमें बेंचमार्क विनिर्देश, स्कोरिंग पद्धतियाँ, रूब्रिक और गुणवत्ता मानक शामिल हैं।
• विविध सॉफ़्टवेयर इंजीनियरिंग टास्क में कोडिंग मॉडल के प्रदर्शन को मापने और बेहतर बनाने पर केंद्रित एंड-टू-एंड शोध पहलों का नेतृत्व करना।
• उच्च-गुणवत्ता वाले डेटासेट, गोल्डन उदाहरण और मूल्यांकन प्रोटोकॉल विकसित करना, जो फ्रंटियर कोडिंग सिस्टम के भरोसेमंद आकलन को संभव बनाएँ।
• मॉडल के व्यवहार और विफलता के तरीकों का विश्लेषण करना, व्यवस्थित कमज़ोरियों की पहचान करना, और निष्कर्षों को ट्रेनिंग व मूल्यांकन के लिए कार्रवाई योग्य सुधारों में बदलना।
• बड़े पैमाने के प्रयोग, डेटा जनरेशन, समीक्षा वर्कफ़्लो और मूल्यांकन पाइपलाइन को सहारा देने वाली टूलिंग और इंफ्रास्ट्रक्चर बनाना।
• कोडिंग-एजेंट आकलन के लिए सर्वोत्तम प्रथाएँ स्थापित करना, जिससे पद्धतिगत सख़्ती, पुनरुत्पादनीयता और माप की गुणवत्ता सुनिश्चित हो।
• प्रयोग डिज़ाइन करने और उभरती मॉडल क्षमताओं का मूल्यांकन करने के लिए शोधकर्ताओं, इंजीनियरों और अप्लाइड AI टीमों के साथ मिलकर काम करना।
• तकनीकी रिपोर्ट, बेंचमार्क अध्ययनों और क्लाइंट-फ़ेसिंग शोध पहलों में योगदान देना, जो मॉडल के प्रदर्शन और अंतर्दृष्टियाँ सामने रखें।

आवश्यकताएँ

• मज़बूत सॉफ़्टवेयर इंजीनियरिंग पृष्ठभूमि, जिसमें Python, C++ या समकक्ष प्रोग्रामिंग भाषाओं में विशेषज्ञता हो।
• सॉफ़्टवेयर इंजीनियरिंग, मशीन लर्निंग, AI शोध, मूल्यांकन या संबंधित तकनीकी विषयों में 3+ वर्षों का अनुभव।
• तकनीकी आकलन, बेंचमार्क, कोडिंग टास्क या मूल्यांकन पद्धतियों को डिज़ाइन, समीक्षा या सत्यापित करने का अनुभव।
• लार्ज लैंग्वेज मॉडल, कोडिंग एजेंट, रीइन्फ़ोर्समेंट लर्निंग, मॉडल मूल्यांकन या संबंधित AI सिस्टम से परिचय।
• व्यवस्थित प्रयोग के ज़रिए टूलिंग बनाने, वर्कफ़्लो ऑटोमेट करने और तकनीकी प्रक्रियाएँ बेहतर करने की सिद्ध क्षमता।
• मॉडल के व्यवहार की जाँच करने और जटिल तकनीकी सिस्टम से अंतर्दृष्टियाँ निकालने की मज़बूत विश्लेषणात्मक क्षमता।
• उत्कृष्ट लिखित और मौखिक संवाद कौशल, जिसमें तकनीकी निष्कर्षों को विविध श्रोताओं के सामने स्पष्ट रूप से रखने की क्षमता शामिल है।
• तेज़ गति वाले शोध वातावरण में, काफ़ी अनिश्चितता और बदलती प्राथमिकताओं के बीच, सहजता से काम करना।

वरीयता प्राप्त

• फ्रंटियर AI सिस्टम, कोडिंग एजेंट या मॉडल मूल्यांकन शोध पर काम करने का अनुभव।
• यह समझने में गहरी रुचि कि डेटा, मूल्यांकन और फ़ीडबैक तंत्र मॉडल की क्षमताओं को कैसे प्रभावित करते हैं।
• अस्पष्ट तकनीकी या शोध प्रोजेक्ट को स्वतंत्र रूप से अवधारणा से क्रियान्वयन तक ले जाने का ट्रैक रिकॉर्ड।
• बड़े पैमाने पर मशीन लर्निंग सिस्टम के लिए बेंचमार्क या डेटासेट डिज़ाइन करने का अनुभव।
• एजेंटिक वर्कफ़्लो, टूल उपयोग, रीइन्फ़ोर्समेंट लर्निंग या पोस्ट-ट्रेनिंग पद्धतियों से परिचय।
• AI, मशीन लर्निंग या सॉफ़्टवेयर इंजीनियरिंग में प्रकाशन, ओपन-सोर्स योगदान या प्रदर्शित तकनीकी नेतृत्व।