पहले ब्लूप्रिंट
हर टेस्ट की शुरुआत जॉब के लिए ज़रूरी कौशलों, कठिनाई के मिश्रण और समय-सीमा से होती है।
हर HireValid टेस्ट, असेसमेंट बनाने की एक ही प्रक्रिया का पालन करता है: लिखित ब्लूप्रिंट, स्वतंत्र समीक्षा से जाँचे गए सवाल, बड़े सवाल-पूल, वर्शन के अनुसार जारी किए गए टेस्ट और वास्तविक उम्मीदवारों के डेटा से बने बेंचमार्क।
हर टेस्ट की शुरुआत जॉब के लिए ज़रूरी कौशलों, कठिनाई के मिश्रण और समय-सीमा से होती है।
ऐसे सवाल जिनका एक जवाब तर्क से सही साबित किया जा सके, जिनमें गलत लेकिन भरोसेमंद लगने वाले विकल्प हों और जिनकी भाषा में कोई चाल न हो।
एक अलग AI मॉडल परिवार का समीक्षक हर सवाल का जवाब बिना जानकारी देखे देता है और उसमें पक्षपात की जाँच करता है।
Live statistics हर सवाल पर नज़र रखते हैं और benchmarks असली उम्मीदवारों के डेटा से बेहतर होते जाते हैं।
हमारी assessment development प्रक्रिया के पाँच चरण हैं। हर टेस्ट एक blueprint से शुरू होता है, जो skills, समय और कठिनाई का स्तर तय करता है। उसी blueprint के आधार पर सवाल लिखे जाते हैं। फिर एक स्वतंत्र समीक्षा में हर सवाल का जवाब बिना किसी संदर्भ के दिया जाता है और quality checklist के आधार पर उसका मूल्यांकन किया जाता है। सिर्फ़ पास होने वाले सवाल ही लाइव किए जाते हैं। सवालों के pool इतने बड़े होते हैं कि हर candidate को अलग टेस्ट मिले। इसके बाद live statistics से हर सवाल पर नज़र रखी जाती है और असली HireValid candidates के आधार पर benchmarks बनाए जाते हैं।
टेस्ट क्या मापता है, उसमें शामिल उप-कौशल और उनके वेटेज, उसका स्तर और समय, और हर सवाल-पूल में कठिनाई का मिश्रण।
हर pool की specification के मुताबिक लिखे गए सवाल, जिनमें मौजूदा सवालों से मिलते-जुलते सवाल शामिल नहीं किए जाते।
एक स्वतंत्र समीक्षा में हर सवाल का जवाब बिना सही उत्तर देखे, उम्मीदवार की तरह दिया जाता है और क्वालिटी चेकलिस्ट के आधार पर उसका स्कोर किया जाता है।
टेस्ट तभी लाइव होता है, जब हर पूल में पर्याप्त सवाल हों और उसके अभ्यास सवालों को मंज़ूरी मिल गई हो। लाइव टेस्ट एक तय संस्करण के रूप में उपलब्ध होता है।
हर लाइव सवाल के रोज़ाना आँकड़े और सैंपल बढ़ने के साथ HireValid के अपने उम्मीदवारों के डेटा से बने बेंचमार्क।
टेस्ट का विकास पहला सवाल तैयार होने से बहुत पहले शुरू हो जाता है। हर HireValid टेस्ट का एक लिखित ब्लूप्रिंट होता है, जो उन सवालों के जवाब देता है जो एक सावधान हायरिंग मैनेजर पूछ सकता है:
ब्लूप्रिंट टेस्ट को काम से जुड़ा रखता है। ऐसा सवाल जो उसकी किसी सब-स्किल से जुड़ा न हो, उसमें शामिल नहीं होना चाहिए।
हर question pool की अपनी स्पेसिफ़िकेशन होती है: विषय, उससे जुड़ा उप-कौशल, इस्तेमाल किए जाने वाले सवालों के फ़ॉर्मैट और कठिनाई का मिश्रण। AI की मदद से सवाल इसी स्पेसिफ़िकेशन के अनुसार तैयार किए जाते हैं। इससे हम हाथ से लिखे टेस्ट की तुलना में कहीं बड़े पूल बना सकते हैं, ताकि हर उम्मीदवार को सवालों का अलग सेट मिल सके।
हर सवाल पर ये नियम लागू होते हैं:
अगर कोई नया सवाल पूल में पहले से मौजूद सवाल से बहुत मिलता-जुलता हो, तो उसे अपने-आप हटा दिया जाता है। इससे पूल में लगभग एक जैसे सवालों के बजाय विविधता बढ़ती है।
उम्मीदवार तक पहुँचने से पहले हर सवाल की स्वतंत्र समीक्षा होती है। समीक्षा करने वाला मॉडल, सवाल का मसौदा तैयार करने वाले मॉडल से अलग AI मॉडल परिवार का होता है, इसलिए दोनों की कमियाँ एक जैसी नहीं होतीं।
समीक्षा दो हिस्सों में होती है। पहले, मॉडल सही उत्तर देखे बिना सवाल का जवाब देता है, ठीक उम्मीदवार की तरह। अगर वह तय किए गए उत्तर तक नहीं पहुँच पाता, तो सवाल पर्याप्त रूप से स्पष्ट नहीं माना जाता और लाइव नहीं होता। दूसरे, वह चेकलिस्ट के आधार पर सवाल को स्कोर करता है: क्या सही उत्तर सही और एकमात्र तर्कसंगत उत्तर है, क्या गलत विकल्प भरोसेमंद लगते हैं, क्या कठिनाई का स्तर सही है, क्या सवाल बताए गए सब-स्किल को जाँचता है, क्या उसमें सांस्कृतिक धारणाएँ नहीं हैं, क्या टेबल और चित्र सवाल के लिए ज़रूरी जानकारी देते हैं, और क्या हर चित्र के लिए ऐसा alt text है जिससे स्क्रीन रीडर इस्तेमाल करने वाला व्यक्ति जवाब दे सके?
80 या उससे ज़्यादा स्कोर करने वाला सवाल लाइव होता है। इससे कम स्कोर वाले सवाल को कारण दर्ज करके अस्वीकार कर दिया जाता है और अगली बार लिखे जाने वाले सवाल से उसकी जगह भर दी जाती है। समीक्षा के साथ-साथ ऑटोमैटिक जाँचें भी होती हैं: स्प्रेडशीट के जवाब हमारे अपने फ़ॉर्मूला इंजन से दोबारा निकाले जाते हैं, कोडिंग के जवाब टेस्ट केस के आधार पर चलाए जाते हैं, और टेक्स्ट में US spelling तथा ऐसे दावों की जाँच होती है जो हम कभी नहीं करते। बाद में किसी सवाल में बदलाव होने पर उसका नया वर्ज़न बनता है और उसकी फिर से वही समीक्षा होती है।
| क्या-क्या जाँचा जाता है | यह आपके लिए क्यों मायने रखता है | |
|---|---|---|
| सही, एक ही जवाब | बिना सही उत्तर देखे दिया गया जवाब उससे मेल खाता है; सिर्फ़ एक तर्कसंगत जवाब | स्कोर कौशल दर्शाते हैं, अस्पष्ट शब्दों को नहीं |
| गलत, लेकिन भरोसेमंद लगने वाले विकल्प | जिसके पास कौशल है, उसके लिए गलत; और जिसके पास नहीं है, उसके लिए लुभावना | यह सवाल उम्मीदवारों के बीच उपयोगी अंतर दिखाता है |
| कठिनाई और उप-कौशल का सही आकलन | सवाल की कठिनाई और उप-कौशल, उस कौशल से मेल खाते हैं जिसकी वह वास्तव में जाँच करता है | सब-स्किल का भरोसेमंद विवरण |
| हर उम्मीदवार के लिए निष्पक्ष | सांस्कृतिक ज्ञान, मुहावरों या रूढ़ियों की ज़रूरत नहीं; पढ़ने का स्तर उपयुक्त | काम की जाँच, पृष्ठभूमि की नहीं |
| सुलभ | टेबल, टेबल के रूप में; ऐसा alt text जिससे स्क्रीन रीडर इस्तेमाल करने वाला व्यक्ति जवाब दे सके | सहायक तकनीक इस्तेमाल करने वाले उम्मीदवारों को नुकसान नहीं होता |
टेस्ट तभी प्रकाशित होता है, जब हर पूल में टेस्ट के लिए चुने जाने वाले सवालों से कम-से-कम तीन गुना मंज़ूरशुदा सवाल हों। Cognitive tests के लिए यह संख्या पाँच गुना होती है। इसी से हर उम्मीदवार को अलग सवाल, अलग क्रम में और फेरबदल किए गए जवाबों के विकल्पों के साथ मिलते हैं। टेस्ट के लिए अभ्यास सवालों का सेट भी ज़रूरी है: हर इस्तेमाल किए गए फ़ॉर्मैट को कवर करने वाले चार आसान सवाल, जो स्कोर वाले सवाल शुरू होने से पहले उम्मीदवारों को दिखाए जाते हैं।
हर प्रकाशित टेस्ट एक तय संस्करण होता है। जब कोई नियोक्ता किसी जॉब को सक्रिय करता है, तो उस जॉब में वही संस्करण बना रहता है जिससे वह शुरू हुआ था। हर स्कोर में उस स्कोर को बनाने वाले स्कोरिंग संस्करण का रिकॉर्ड होता है। अगर बाद में टेस्ट में सुधार किया जाता है, तो पहले के नतीजों का मूल अर्थ वही रहता है और आप हमेशा समझा सकते हैं कि पुराना नतीजा कैसे आया। कुछ भी कभी हटाया नहीं जाता: इस्तेमाल से हटाए गए सवाल को हटाने की वजह के साथ रिटायर किया जाता है और उसका इतिहास सुरक्षित रखा जाता है।
Answer keys और सवालों के पूल कभी हमारे सर्वर से बाहर नहीं जाते। उम्मीदवारों को एक बार में एक सवाल मिलता है। नियोक्ताओं को सवाल का टेक्स्ट नहीं, बल्कि उप-कौशल के स्कोर दिखते हैं। इससे अगले उम्मीदवार के लिए सवालों की सामग्री सुरक्षित रहती है। नकल-रोधी जानकारी बताती है कि यह डिज़ाइन टेस्ट को AI से होने वाली मदद के प्रति कैसे सुरक्षित रखता है।
उम्मीदवारों के टेस्ट देना शुरू करने के बाद, रोज़ाना की सांख्यिकीय निगरानी देखती है कि हर सवाल असल में कैसा काम कर रहा है: उसका जवाब कितनी बार सही दिया जाता है, और क्या मज़बूत उम्मीदवार उसे कमज़ोर उम्मीदवारों की तुलना में ज़्यादा बार सही देते हैं। यही item analysis का मुख्य आधार है। जो सवाल ठीक से काम नहीं करता, उसे समीक्षा के लिए इस्तेमाल से हटा दिया जाता है और उसकी जगह नया सवाल दिया जाता है।
इसी डेटा से टेस्ट का बेंचमार्क बनता है। HireValid के बेंचमार्क उसके अपने उम्मीदवारों के डेटा से आते हैं और हर टेस्ट वर्ज़न के लिए अलग होते हैं। 50 उम्मीदवारों के टेस्ट पूरा करने के बाद टेस्ट में परसेंटाइल दिखने लगते हैं। सैंपल 200 तक पहुँचने तक हर परसेंटाइल को सैंपल साइज़ के साथ अस्थायी बेंचमार्क के रूप में लेबल किया जाता है; 200 से इसे सैंपल साइज़ के साथ HireValid उम्मीदवारों का बेंचमार्क कहा जाता है। बेंचमार्क रोज़ाना फिर से गणना किए जाते हैं और सैंपल बढ़ने के साथ अपडेट होते हैं। हर नतीजे में उस बेंचमार्क वर्ज़न का रिकॉर्ड रहता है जिससे उसकी तुलना की गई थी। बेंचमार्क पेज बताता है कि परसेंटाइल को कैसे पढ़ें।
विश्वसनीयता से पता चलता है कि test लगातार एक जैसा मापता है या नहीं, और वैधता से कि वह job की ज़रूरत के मुताबिक चीज़ें मापता है या नहीं। दोनों की शुरुआत test की रूपरेखा से होती है: ऐसा test जो role में सचमुच इस्तेमाल होने वाली skills पर आधारित हो, जिसमें साफ़ तौर पर तय sub-skills के आधार पर scoring हो और हर skill के लिए इतने सवाल हों कि नतीजे की स्थिर तस्वीर मिले।
ऊपर बताई गई प्रक्रिया इन दोनों को बनाए रखने में मदद करती है। स्वतंत्र समीक्षा से अस्पष्ट या गलत answer key वाले सवाल हटाए जाते हैं, जो नतीजों में अनावश्यक उतार-चढ़ाव ला सकते हैं। कठिनाई के स्तरों का संतुलित मिश्रण रखने वाले बड़े question pools से अलग-अलग candidates के tests की तुलना की जा सकती है। असली candidates के item statistics बताते हैं कि कौन-से सवाल बेहतर और कमज़ोर प्रदर्शन में फ़र्क दिखाते हैं। जो सवाल ऐसा नहीं करते, उन्हें हटा दिया जाता है। जैसे-जैसे sample बढ़ते हैं, ये statistics हर test के लिए ज़्यादा मज़बूत evidence base तैयार करते हैं, जो test देने वाले लोगों से जुटाया जाता है।
Employers के लिए व्यावहारिक नियम सीधे हैं: role से मेल खाने वाले tests चुनें, हर candidate को एक जैसा test और उतना ही समय दें, अनुरोध पर सुविधा दें और हर hiring round के बाद चयन दरों की जाँच करें। हमारा निष्पक्षता का तरीका और नौकरी से पहले की जाँच पर गाइड इन कदमों के बारे में और विस्तार से बताते हैं।
निष्पक्षता की जाँच सिर्फ़ एक बार नहीं होती। हर टेस्ट के साथ उसकी निष्पक्षता से जुड़ी जानकारी दी जाती है, उम्मीदवारों को अतिरिक्त समय दिया जा सकता है, और अभ्यास के सवालों से यह सुनिश्चित होता है कि किसी को भी समय की सीमा के भीतर पहली बार किसी अनजान फ़ॉर्मैट का सामना न करना पड़े।
नियोक्ताओं को अपने नतीजों की भी जाँच करनी चाहिए। हर भर्ती दौर के बाद, आवेदकों के अलग-अलग समूहों की चयन दरों की तुलना करें; four-fifths rule एक आम शुरुआती जाँच है। कोई अंतर दिखे तो किसी व्यक्ति को टेस्ट, भूमिका और प्रक्रिया की अधिक बारीकी से समीक्षा करनी चाहिए। यह अपने आप में कभी कोई अंतिम फैसला नहीं है।
HireValid किसी उम्मीदवार को अपने आप अस्वीकार, छिपाता या रैंक नहीं करता। स्कोर, बेंचमार्क और इंटेग्रिटी से जुड़े संकेत नियोक्ता को जानकारी देते हैं, और हर फैसला नियोक्ता ही करता है।
लाइब्रेरी देखें, प्रैक्टिस सवाल आज़माएँ और कुछ ही मिनटों में भूमिका के लिए टेस्ट बंडल बनाएँ। तीन उम्मीदवारों के लिए मुफ़्त।
अब भी तय नहीं कर पाए? Free प्लान से शुरू करें और असली नौकरी के लिए इसे आज़माएं।
मुफ़्त शुरू करेंAI की मदद से सवालों के हर pool के लिए HireValid टीम द्वारा टेस्ट के blueprint के आधार पर लिखी गई विस्तृत specification के मुताबिक सवाल तैयार किए जाते हैं। फिर हर सवाल की अलग AI family के एक model से स्वतंत्र समीक्षा होती है। वह model बिना किसी संदर्भ के सवाल का जवाब देता है और quality checklist के आधार पर उसका मूल्यांकन करता है। सिर्फ़ पास होने वाले सवाल ही लाइव किए जाते हैं।
स्वतंत्र समीक्षा में हर सवाल का जवाब बिना उत्तर-कुंजी देखे दिया जाता है। फिर जांचा जाता है कि जवाब कुंजी से मेल खाता है और कोई दूसरा विकल्प भी सही नहीं ठहराया जा सकता। स्प्रेडशीट के जवाब हमारे फ़ॉर्मूला इंजन से दोबारा कैलकुलेट किए जाते हैं और कोडिंग के जवाब उनके टेस्ट केस पर चलाए जाते हैं। इनमें से किसी भी जांच में विफल होने वाला सवाल कभी लाइव नहीं किया जाता।
हर पूल में मंज़ूर किए गए सवालों की संख्या टेस्ट में इस्तेमाल होने वाले सवालों से कम से कम तीन गुना होती है। कॉग्निटिव टेस्ट के लिए यह संख्या पाँच गुना होती है। हर उम्मीदवार के लिए टेस्ट नए सवाल चुनता है, अलग क्रम में और बदले हुए विकल्पों के साथ। इससे टेस्ट की तुलना करना संभव रहता है और सवाल साझा करने का फ़ायदा बहुत कम हो जाता है।
रोज़ाना की statistics monitoring हर live सवाल पर नज़र रखती है: उसका जवाब कितनी बार सही दिया जाता है और क्या बेहतर उम्मीदवार उसे कमज़ोर उम्मीदवारों से ज़्यादा बार सही हल करते हैं। कोई सवाल ठीक से काम न करे तो उसे review के लिए हटा दिया जाता है और उसकी जगह दूसरा सवाल लाया जाता है। उसका इतिहास सुरक्षित रखा जाता है। पुराने results उसी version से जुड़े रहते हैं जिसके आधार पर उन्हें score किया गया था।
HireValid के अपने उम्मीदवारों के नतीजों से, हर टेस्ट वर्ज़न के लिए अलग-अलग। 50 उम्मीदवारों के टेस्ट पूरा करने के बाद पर्सेंटाइल दिखने लगते हैं। 200 उम्मीदवारों तक पहुँचने तक इन्हें सैंपल के आकार के साथ अस्थायी बताया जाता है, और सैंपल बढ़ने पर रोज़ फिर से इनकी गणना होती है। हर नतीजे में उस बेंचमार्क वर्ज़न का रिकॉर्ड होता है जिससे उसकी तुलना की गई थी, ताकि उसका अर्थ बिना बताए कभी न बदले।
नहीं। नौकरी सक्रिय करने पर वही टेस्ट वर्ज़न बना रहता है जिससे वह शुरू हुई थी, और हर स्कोर में इस्तेमाल किए गए स्कोरिंग और benchmark वर्ज़न दर्ज होते हैं। बाद में टेस्ट में सुधार होने पर नई नौकरियों में नया वर्ज़न मिलता है, जबकि आपके मौजूदा नतीजों का मूल अर्थ वही रहता है और उन्हें हमेशा समझाया जा सकता है।
भूमिका के लिए टेस्ट बंडल चुनें, एक लिंक भेजें और असली स्किल्स के आधार पर उम्मीदवारों की तुलना करें। कोई सालाना कॉन्ट्रैक्ट नहीं।