अपील की प्रक्रिया त्रुटि-बीमा नहीं है: नौकरी तलाशने वाले हर जोड़ी जा सकने वाली प्रक्रियात्मक सुरक्षा से ऊपर एक मानव समीक्षक को महत्व देते हैं

1,919 अमेरिकी नौकरी तलाशने वालों को दो AI स्क्रीनिंग सिस्टम के सामने रखें और चुनाव के लिए बाध्य करें: उन्हें सबसे ज़्यादा हिलाने वाली विशेषता त्रुटि-दर नहीं है। यह है कि निर्णय कोई मानव समीक्षक लेता है या नहीं। सितंबर में प्रकाशित एक पूर्व-पंजीकृत conjoint प्रयोग में, मानव भागीदारी ने किसी स्क्रीनिंग सिस्टम के चुने जाने की संभावना 0.272 बढ़ा दी — जो गलत अस्वीकृतियों को 30% से 10% तक घटाने से मिलने वाले 0.285 से सांख्यिकीय रूप से अलग नहीं है, और अंतर का विश्वास-अंतराल शून्य को पार करता है (Wang, Sturgis & de Kadt, 2026)।

इस सौदे को दो बार पढ़ें। आपकी दो-तिहाई गलत अस्वीकृतियाँ, या निर्णय पर एक नाम। उम्मीदवार दोनों की कीमत लगभग बराबर आँकते हैं।

यह परिणाम दिलचस्प है। अगला परिणाम परिचालन रूप से महंगा है, क्योंकि मध्य-बाज़ार के अधिकांश अस्वीकृति-मार्ग इसके उलट सिद्धांत पर बने हैं।

जब सौदा अनिवार्य था, तब 1,919 उम्मीदवारों ने क्या कीमत लगाई

अध्ययन का डिज़ाइन ही इसे गंभीरता से लेने का कारण है। प्रत्येक प्रतिभागी ने AI स्क्रीनिंग सिस्टम के युग्मित प्रोफ़ाइलों के बीच आठ चुनाव किए — कुल 30,704 प्रोफ़ाइल — और छह विशेषताएँ एक-दूसरे से स्वतंत्र रूप से यादृच्छिक की गईं: निर्णय-अधिकार, त्रुटि-दर, स्पष्टीकरण, बाहर निकलने का विकल्प, अपील, और स्वतंत्र पूर्वाग्रह-ऑडिट।

स्वतंत्र यादृच्छिकीकरण ही कार्यप्रणाली का मूल बिंदु है। पिछले अध्ययन प्रक्रिया और प्रदर्शन को आम तौर पर साथ-साथ बदलते हैं, इसलिए वे यह नहीं बता सकते कि उम्मीदवार अपील को उसके स्वयं के लिए महत्व देते हैं या केवल उन त्रुटियों के लिए जिन्हें वह सुधारती है। यह डिज़ाइन दोनों को अलग करता है, और डेटा आने से पहले पंजीकृत था।

नमूना कामकाजी लोगों का है, छात्रों का नहीं: औसत आयु 36.6 वर्ष, 35.0% बेरोज़गार और सक्रिय रूप से नौकरी खोज रहे, और 74.9% अपनी खोज में किसी मोड़ पर AI द्वारा मूल्यांकित हो चुके।

यह है मूल्य-सूची, चुने जाने की संभावना में परिवर्तन के रूप में (Wang, Sturgis & de Kadt, 2026):

सिस्टम की विशेषता	चुने जाने की संभावना पर प्रभाव
AI सुझाव देता है, मनुष्य निर्णय लेता है	+0.287
AI पहले छँटाई करता है, मनुष्य निर्णय लेता है	+0.257
मानव भागीदारी (संयुक्त)	+0.272
अपील उपलब्ध	+0.156
बाहर निकलने का विकल्प उपलब्ध	+0.129
स्पष्टीकरण उपलब्ध	+0.128
स्वतंत्र पूर्वाग्रह-ऑडिट	+0.068
त्रुटि-दर 30% से 10% घटाना	+0.285

संयुक्त मानव भागीदारी ने अपील, बाहर निकलने के विकल्प और पूर्वाग्रह-ऑडिट — तीनों को पीछे छोड़ा, प्रत्येक p < 0.001 पर। मानव भागीदारी, अपील और बाहर निकलने का विकल्प, प्रत्येक ने पूर्वाग्रह-ऑडिट को पीछे छोड़ा, पुनः p < 0.001 पर।

निर्णय पर बैठा एक मनुष्य एक स्वतंत्र पूर्वाग्रह-ऑडिट से लगभग चार गुना मूल्यवान है।

सिस्टम बिगड़ने पर अपील अधिक मूल्यवान नहीं हुई

यही वह निष्कर्ष है जो उपचार का मानक क्रम उलट देता है।

यदि प्रक्रियात्मक सुरक्षाएँ त्रुटि-बीमा हैं — यदि अपील इसलिए मूल्यवान है कि वह गलत अस्वीकृतियाँ पकड़ती है — तो गलत अस्वीकृतियाँ बढ़ने पर उसका मूल्य बढ़ना चाहिए। प्रयोग ने ठीक यही परखा, ±0.05 की पूर्व-पंजीकृत समतुल्यता सीमा के साथ।

अपील का मूल्य नहीं बढ़ा। न बाहर निकलने के विकल्प का, न पूर्वाग्रह-ऑडिट का, न स्पष्टीकरण का। अपील और बाहर निकलने का विकल्प ±0.03 की कड़ी सीमा में भी उतरे; पूर्वाग्रह-ऑडिट और स्पष्टीकरण पंजीकृत ±0.05 में उतरे। त्रुटि-सुधार की भविष्यवाणी किसी भी विशेषता के लिए पुष्ट नहीं हुई।

अपील सबसे स्पष्ट परीक्षण है, क्योंकि चारों में उसका सुधारात्मक कार्य सबसे सीधा है। त्रुटि-दर के साथ उसकी अंतःक्रिया सांख्यिकीय रूप से महत्वपूर्ण नहीं थी, और 90% विश्वास-अंतराल ±0.03 के भीतर रहा। विशेषता प्रतिभागियों को बताती थी कि पुनरीक्षण उपलब्ध है। वह यह नहीं बताती थी कि वह कितना अच्छा काम करता है — और परखी गई हर त्रुटि-दर पर इतना ही पर्याप्त रहा।

मानव भागीदारी एकमात्र विशेषता थी जो सीमा से बाहर गई, और लेखक इस बारे में सतर्क हैं: 10% त्रुटि-दर पर उसका लाभ 0.285 था, 20% पर 0.289 और 30% पर 0.239 — एकदिशीय नहीं, पैमाने के प्रति संवेदनशील, और logit के अंतर्गत महत्वपूर्ण नहीं (p = 0.21)। वे स्पष्ट रूप से इसे "त्रुटियाँ बढ़ने पर मानव समीक्षा का मूल्य घटना" पढ़ने से इनकार करते हैं। आपको भी नहीं पढ़ना चाहिए।

उपयोग-योग्य निष्कर्ष संकरा और ठोस है: प्रदर्शन पर काम और प्रक्रिया पर काम दो अलग माँगों का उत्तर देते हैं, और कोई एक दूसरे को नहीं खरीदता। जो नियोक्ता अधिक सटीक मॉडल लगाता है पर निर्णय से मनुष्य को हटा देता है, वह एक आयाम में जीतता है और दूसरे में हारता है।

पूर्वाग्रह-ऑडिट वह चीज़ नहीं जिसका सहारा कोई उम्मीदवार ले सके

अपील (+0.156) और पूर्वाग्रह-ऑडिट (+0.068) के बीच की दूरी पर फिर नज़र डालें। लेखकों की व्याख्या अध्ययन का सबसे हस्तांतरणीय वाक्य है: निर्णय-अधिकार तय करता है कि निर्णय कौन लेता है, अपील और बाहर निकलने का विकल्प उम्मीदवार को सहारा लेने योग्य कुछ देते हैं, और ऑडिट मामलों के समुच्चय में परिणाम जाँचता है, किसी व्यक्ति को कोई मार्ग नहीं देता।

ये तीन भिन्न कार्य हैं, और अनुपालन-व्यवस्थाएँ इन्हें बहुत भिन्न ढंग से बरतती हैं। न्यूयॉर्क सिटी का Local Law 144 एक पूर्वाग्रह-ऑडिट के साथ ऐसी सूचना अनिवार्य करता है जो बताए कि वैकल्पिक प्रक्रिया कैसे मांगी जाए — और कार्यान्वयन नियम नियोक्ता को वह प्रक्रिया वास्तव में देने के लिए बाध्य नहीं करते (NYC DCWP, 2023)। EU AI Act दूसरा रास्ता लेता है और परिशिष्ट III(4)(a) तथा अनुच्छेद 14 और 26(2) के अंतर्गत निर्दिष्ट भर्ती प्रणालियों पर मानव निगरानी अनिवार्य करता है, जबकि GDPR का अनुच्छेद 22 पूर्णतः स्वचालित निर्णय के अधीन न होने का सशर्त अधिकार देता है, साथ में मानव हस्तक्षेप और परिणाम को चुनौती देने के अधिकार (EU AI Act, 2024)।

यदि आपका AI स्क्रीनिंग ढाँचा पहली व्यवस्था को संतुष्ट करने के लिए बना है, तो आपके पास सिस्टम-स्तर का दस्तावेज़ीकरण है। 1,919 प्रतिभागियों ने दस्तावेज़ीकरण को परखी गई हर चीज़ से कम महत्व दिया।

मानव समीक्षक को वास्तव में कहाँ बैठना चाहिए

एक अंतिम विरोधाभास का डिज़ाइन पर वास्तविक भार है। प्रतिभागियों ने "AI सुझाव देता है, मनुष्य निर्णय लेता है" (+0.287) को "AI पहले छँटाई करता है, मनुष्य निर्णय लेता है" (+0.257) से 0.030 अधिक पसंद किया, p < 0.001 पर — और यह पसंद त्रुटि-दर के साथ नहीं बदली (पूरे परास में परिवर्तन +0.005, 95% CI [−0.026, 0.036])।

इन दोनों स्तरों का अंतर शब्दों में छोटा और व्यवहार में बड़ा है: केवल पहला स्तर किसी मनुष्य को वे आवेदन देखने देता है जिन्हें AI अस्वीकार कर देता। उम्मीदवारों ने इसके लिए मापने योग्य प्रीमियम चुकाया।

व्यवहारिक आँकड़े उसी दिशा में इशारा करते हैं। अमेरिकी उम्मीदवारों में 38% कम-से-कम एक बार किसी भर्ती प्रक्रिया से इसी कारण हट गए कि उसमें AI-संचालित साक्षात्कार शामिल था, और सबसे अधिक बताया गया त्याग-कारण — 33% ने बताया — बिना किसी मनुष्य की उपस्थिति में AI द्वारा अंकित पूर्व-रिकॉर्डेड वीडियो साक्षात्कार था (Greenhouse, 2026)।

क्या ये विशेषताएँ एक-दूसरे को मज़बूत करती हैं? बस बहुत थोड़ा

सुविधाजनक होता यदि मानव निर्णयकर्ता और अपील गुणात्मक रूप से जुड़ जाते। इसके प्रमाण कमज़ोर हैं। जहाँ मनुष्य पहले से शामिल था, वहाँ अपील को अधिक महत्व मिला — +0.025, 95% CI [0.004, 0.047] — पर संयुक्त मॉडल में logit विशिष्टीकरण के अंतर्गत वही अंतःक्रिया सार्थकता खो देती है (p = 0.31)। बाहर निकलने के विकल्प की अंतःक्रिया व्यावहारिक रूप से शून्य थी: −0.0003।

इसलिए विशेषताओं को योगात्मक मानें, सहक्रियात्मक नहीं। आप ऐसा पैकेज नहीं खरीद रहे जिसमें एक विशेषता दूसरी को ऊपर उठाती हो; आप चार अलग चीज़ें खरीद रहे हैं जिन्हें उम्मीदवार चार अलग कीमतों पर आँकते हैं। इससे निकलने वाली क्रम-सलाह चमक-रहित है: महंगी वाली पहले खरीदें।

ईमानदार प्रतिवाद

तीन सीमाएँ, साफ़-साफ़।

ये कथित चुनाव हैं, आवेदन नहीं। यथास्थिति विकल्प के बिना और दोनों को अस्वीकार करने की सुविधा के बिना एक काल्पनिक युग्मित चुनाव एक साफ़ उपकरण है, वेतन-अभिलेख नहीं। और विशेषताएँ निःशुल्क के रूप में प्रस्तुत की गई थीं — सर्वे की अपील में कोई कतार, कोई विलंब और कोई अनिश्चित परिणाम नहीं है, और वह वह अपील नहीं है जो आप वास्तव में चलाएँगे।

नाममात्र का मनुष्य, मनुष्य नहीं होता। लेखक स्पष्ट विफलता-विधि की ओर इशारा करते हैं: लूप में बैठा समीक्षक उस सिफ़ारिश के सामने झुक सकता है जिसकी जाँच उसे करनी है। क्षेत्र-प्रमाण इसे और तेज़ करते हैं। हार्वर्ड बिज़नेस स्कूल के एक प्रयोग में, जहाँ 228 मूल्यांकनकर्ताओं ने 48 वास्तविक प्रस्तुतियाँ देखीं, "ब्लैक-बॉक्स" AI सिफ़ारिशों ने निर्णय-गुणवत्ता सुधारी, पर वही सिफ़ारिशें कथात्मक स्पष्टीकरण के साथ देने पर नहीं — मूल्यांकनकर्ता अस्वीकृति की सिफ़ारिशों का असमान रूप से पालन करने लगे, जिससे फ़ॉल्स निगेटिव बढ़े (Lane et al., HBS, 2026)। एक मनुष्य और उसके साथ एक प्रभावशाली तर्क, दोनों के अकेले होने से भी बुरा हो सकता है। उम्मीदवार निर्णय लेने वाला चाहते हैं; आपके फ़नल को ज़रूरत है कि वह व्यक्ति वास्तव में निर्णय ले।

उम्मीदवार फिर भी आवेदन करेंगे, और यही आपको भ्रमित करेगा। भर्ती में AI इस्तेमाल करने वाले नियोक्ताओं को आवेदन करने का इरादा पाँच-बिंदु पैमाने पर औसतन 3.24 रहा, जो AI भर्ती की वैधता में विश्वास (2.85) से ऊपर है (p < 0.001), और 7.8% प्रतिभागियों ने मध्य-बिंदु से नीचे की वैधता के साथ मध्य-बिंदु से ऊपर का आवेदन-इरादा जोड़ा (Wang, Sturgis & de Kadt, 2026)। आवेदन-मात्रा इस बात का अपूर्ण संकेतक है कि उम्मीदवार आपकी प्रक्रिया को वैध मानते हैं या नहीं। स्वस्थ फ़नल-शीर्ष सहमति का प्रमाण नहीं है।

तिमाही बंद होने से पहले अस्वीकृति-मार्ग में क्या बदलें

चार कदम, किसी के लिए नई बजट-मद की ज़रूरत नहीं।

1. अपील पोर्टल को "सटीकता पर काम" के खाते में दर्ज करना बंद करें। यदि उम्मीदवार-विश्वास की शिकायतों पर आपकी योजना है "मॉडल ट्यून करो, एक अपील फ़ॉर्म जोड़ो", तो आपकी दो मदें एक ही माँग का उत्तर दे रही हैं और दूसरी माँग का कोई नहीं। उनकी कीमत अलग-अलग लगाएँ, क्योंकि उम्मीदवार ऐसा ही करते हैं।
2. मनुष्य को निगरानी से निर्णय पर ले जाएँ — विशेष रूप से अस्वीकृति की तरफ़। जो संस्करण +0.257 के बजाय +0.287 कमाता है, वह मनुष्य है जो मॉडल द्वारा अस्वीकार किए जाने से पहले देख लेता है कि मॉडल क्या अस्वीकार करता। इसे टिकाऊ बनाने वाला तंत्र नीति नहीं, एक रूटिंग नियम है: जो अंक अपने भूमिका-और-वरिष्ठता समूह की सांख्यिकीय निम्न-सीमा से नीचे हैं, वे स्वतः एक मानव समीक्षक के पास चले जाते हैं — ऐसी कतार में जिसे भर्ती करने वाला रिक्रूटर स्वयं बंद नहीं कर सकता। यदि आपको एक ठोस संदर्भ चाहिए, Scovai अपने प्लेटफ़ॉर्म पेज पर उस रूटिंग और उसके पीछे की भार-गणना को सार्वजनिक रूप से दर्ज करता है।
3. व्यक्तिगत पुनरीक्षण को ऑडिट से कभी न बदलें। सिस्टम-स्तर पर ऑडिट जोड़ना और व्यक्तिगत पुनरीक्षण हटाना यह बदल देता है कि उम्मीदवार क्या कर सकता है, न कि केवल यह कि आप क्या दर्ज कर सकते हैं — और यह 0.156 मूल्य वाली विशेषता को 0.068 मूल्य वाली से बदल देता है।
4. निष्पक्षता के मापक के रूप में आवेदन-मात्रा हटाएँ। AI स्क्रीनिंग चरण पर त्याग-दर और AI-अंकित आकलनों की पूर्णता-दर मापें। उम्मीदवार आपत्ति करते हैं तो ये हिलते हैं। आवेदन नहीं हिलते।

प्रक्रियात्मक अधिकार अपने बल पर अपनी जगह बनाते हैं। वे आपकी त्रुटि-दर के विरुद्ध कोई बचाव नहीं हैं, और आपकी त्रुटि-दर उनका विकल्प नहीं है। मानव समीक्षक वह सुरक्षा नहीं जो मॉडल अविश्वसनीय साबित होने पर जोड़ी जाए — इन प्रमाणों के अनुसार वही वह चीज़ थी जिसकी कीमत उम्मीदवार शुरू से आँक रहे थे, और सूची में एकमात्र ऐसी विशेषता जिसका स्थान किसी और ने नहीं लिया।

तो इस सप्ताह अपना अस्वीकृति-मार्ग खोलिए और वह चरण खोजिए जहाँ किसी व्यक्ति का नाम दिखता है। यदि वहाँ एकमात्र नाम किसी फ़ॉर्म का है, तो आपके पास दस्तावेज़ीकरण है — निर्णय नहीं।