सांख्यिकी on kenji.blog

'टेस्ट में पॉज़िटिव' का मतलब हमेशा 'बीमार' होना नहीं है: बेस रेट फैलेसी (Base Rate Fallacy)

Thu, 10 Sep 2026 21:00:00 +0900

स्वास्थ्य जांच (हेल्थ चेकअप) या कैंसर स्क्रीनिंग में अगर परिणाम “पॉज़िटिव (असामान्यता)” आता है, तो किसी का भी घबरा जाना स्वाभाविक है। लेकिन, यदि आपको सांख्यिकी और प्रायिकता का ज्ञान है, तो आप गहरी सांस लेकर शांत हो सकते हैं। ऐसा इसलिए है क्योंकि “उच्च सटीकता वाले टेस्ट में पॉज़िटिव आने” का मतलब यह नहीं है कि “वास्तव में बीमार होने की संभावना भी अधिक है”।

इसे “बेस रेट फैलेसी (Base Rate Fallacy - आधार दर भ्रांति)” या “पूर्व प्रायिकता की उपेक्षा (Base rate neglect)” कहा जाता है। यह एक विशिष्ट संज्ञानात्मक पूर्वाग्रह (cognitive bias) है, जहां हमारा अंतर्ज्ञान प्रायिकता की गणना को समझने में भारी भूल करता है।

स्वास्थ्य जांच की डरावनी समस्या

निम्नलिखित स्थिति की कल्पना करें:

एक शहर में, एक अज्ञात बीमारी है जिससे 10,000 में से 1 व्यक्ति (0.01%) संक्रमित है। इस बीमारी का पता लगाने के लिए, एक बेहतरीन टेस्ट किट विकसित की गई है जिसकी “सटीकता 99%” है। (※ 99% सटीकता का मतलब है कि अगर कोई बीमार व्यक्ति यह टेस्ट लेता है, तो 99% संभावना है कि परिणाम सही रूप से “पॉज़िटिव” आएगा, और यदि कोई स्वस्थ व्यक्ति इसे लेता है, तो 99% संभावना है कि परिणाम सही रूप से “नेगेटिव” आएगा।)

आपने संयोग से यह टेस्ट करवाया और परिणाम “पॉज़िटिव” आया। अब, आपके वास्तव में इस बीमारी से संक्रमित होने की क्या संभावना है?

ज्यादातर लोग सहज रूप से जवाब देते हैं, “चूंकि टेस्ट की सटीकता 99% है, इसलिए मेरे बीमार होने की संभावना भी 99% होगी।” हालांकि, इसका गणितीय रूप से सही उत्तर “लगभग 0.98% (1% से कम)” है।

आखिर ऐसा क्यों है कि 99% सटीकता होने के बावजूद, वास्तविक संभावना 1% से भी कम रह जाती है?

बेज़ का प्रमेय और समग्र दृश्य

इस समस्या को सुलझाने की कुंजी न केवल टेस्ट की सटीकता पर ध्यान देना है, बल्कि यह भी विचार करना है कि “वह बीमारी मूल रूप से कितनी दुर्लभ है (बेस रेट/पूर्व प्रायिकता)”। आइए 10 लाख लोगों के एक बड़े समूह का उपयोग करके इस सहज ज्ञान के विपरीत होने वाली घटना की कल्पना करें।

कुल जनसंख्या: 1,000,000 लोग
वास्तव में बीमार लोग (10,000 में से 1): 100 लोग
स्वस्थ लोग: 999,900 लोग

इन सभी 10 लाख लोगों पर “99% सटीकता” वाला टेस्ट किया जाता है।

1. जब वास्तव में बीमार लोग (100 लोग) टेस्ट करवाते हैं

चूंकि सटीकता 99% है, इसलिए जिन्हें सही रूप से “पॉज़िटिव” के रूप में पहचाना जाएगा: 100 लोग × 99% = 99 लोग (सच्चा सकारात्मक)

2. जब स्वस्थ लोग (999,900 लोग) टेस्ट करवाते हैं

चूंकि सटीकता 99% है, इसलिए 1% संभावना है कि किसी को गलती से “पॉज़िटिव” मान लिया जाए (झूठा सकारात्मक): 999,900 लोग × 1% = 9,999 लोग (झूठा सकारात्मक)

graph TD A["कुल जनसंख्या (1,000,000 लोग)"] --> B["बीमार लोग (100 लोग)"] A --> C["स्वस्थ लोग (999,900 लोग)"] B -->|99% सही| B1["सच्चा सकारात्मक (99 लोग)"] B -->|1% गलत| B2["झूठा नकारात्मक (1 व्यक्ति)"] C -->|99% सही| C1["सच्चा नकारात्मक (989,901 लोग)"] C -->|1% गलत| C2["झूठा सकारात्मक (9,999 लोग)"] B1 -.-> D{"'पॉज़िटिव' बताए गए लोगों की कुल संख्या: 10,098 लोग"} C2 -.-> D style A fill:#ECEFF1,stroke:#333 style B fill:#FFCDD2,stroke:#333 style C fill:#C8E6C9,stroke:#333 style B1 fill:#F44336,stroke:#333,color:#fff style C2 fill:#FF9800,stroke:#333,color:#fff style D fill:#FFF9C4,stroke:#333,stroke-width:2px

आपके वास्तव में बीमार होने की वास्तविक संभावना

अब, डॉक्टर ने आपको बताया कि आप “पॉज़िटिव” हैं। इसका मतलब है कि आप चित्र के निचले-दाएं भाग में “‘पॉज़िटिव’ बताए गए लोगों की कुल संख्या (10,098 लोग)” वाले समूह में शामिल हो गए हैं।

इस समूह के भीतर, “वास्तव में बीमार लोगों (सच्चा सकारात्मक)” का प्रतिशत क्या है?

$$ \text{वास्तव में बीमार होने की संभावना} = \frac{\text{सच्चा सकारात्मक}}{\text{पॉज़िटिव बताए गए कुल लोग}} = \frac{99}{99 + 9,999} = \frac{99}{10,098} \approx 0.0098 $$

गणना का परिणाम लगभग 0.98% है। “पॉज़िटिव” बताए जाने के बावजूद, आपके स्वस्थ होने की संभावना (झूठा सकारात्मक) कहीं अधिक (लगभग 99%) है।

हमारा अंतर्ज्ञान गलत क्यों होता है?

इस घटना को “बेज़ के प्रमेय (Bayes’ Theorem)” द्वारा गणितीय रूप से समझाया जा सकता है, जो सशर्त प्रायिकता की गणना करता है, लेकिन मानव मस्तिष्क इस तरह की गणनाओं में बहुत कमज़ोर है।

हमसे गलती इसलिए होती है क्योंकि हम तत्काल दी गई व्यक्तिगत और प्रभावशाली जानकारी (“आपका टेस्ट परिणाम पॉज़िटिव है! सटीकता 99% है!”) पर ध्यान केंद्रित कर लेते हैं और पृष्ठभूमि में मौजूद विशाल और उबाऊ सांख्यिकीय डेटा (“शुरू में ही इस बीमारी से संक्रमित लोगों की संख्या केवल 10,000 में से 1 है (बेस रेट)”) को नज़रअंदाज़ कर देते हैं।

चूंकि “बीमारी की दुर्लभता (0.01%)”, “टेस्ट की अशुद्धता (1%)” की तुलना में बहुत अधिक चरम है, इसलिए टेस्ट की एक छोटी सी गलती भी मूल बीमार लोगों की संख्या को आसानी से निगल जाती है।

समाज में छिपी “बेस रेट फैलेसी”

यह भ्रांति केवल चिकित्सा क्षेत्र में ही नहीं, बल्कि विभिन्न स्थितियों में घबराहट और गलत निर्णय का कारण बनती है।

चेहरा पहचान प्रणाली और आतंकवादी: भले ही 99.9% सटीकता वाला चेहरा पहचान कैमरा हवाई अड्डे पर किसी “आतंकवादी” को पहचान ले, लेकिन आतंकवादियों की मूल प्रायिकता (बेस रेट) बहुत कम होने के कारण, पकड़े जाने वाले ज़्यादातर लोग केवल चेहरे से मिलते-जुलते निर्दोष आम नागरिक (झूठा सकारात्मक) ही होंगे।
यातायात दुर्घटनाएं और बुजुर्ग ड्राइवर: खबरों में यह देखकर कि “दुर्घटना करने वाली कारों का 〇〇% बुजुर्गों द्वारा चलाया जा रहा था”, आप इसे खतरनाक मान सकते हैं। लेकिन अगर आप इस बात पर विचार नहीं करते कि “सड़कों पर चलने वाले कुल ड्राइवरों में बुजुर्गों का प्रतिशत (बेस रेट) कितना है”, तो आप यह तय नहीं कर सकते कि कोई विशिष्ट आयु वर्ग वास्तव में दुर्घटनाओं के प्रति अधिक प्रवृत्त है या नहीं।

“बेस रेट फैलेसी” हमें यह सिखाती है कि जब भी हम चौंकाने वाले आंकड़े या व्यक्तिगत मामले देखें, तो हमें सांख्यिकीय सोच के महत्व को याद करते हुए इस बुनियादी सवाल पर लौटना चाहिए: “समग्र रूप से इसके घटित होने की संभावना वास्तव में कितनी है (बेस रेट)?”

सिम्पसन का विरोधाभास: हिस्सों में जीतना, लेकिन समग्र रूप से हारने की रहस्यमय घटना

Thu, 10 Sep 2026 07:00:00 +0900

1. आपको किस अस्पताल में सर्जरी करानी चाहिए?

आप एक गंभीर बीमारी से पीड़ित हैं और आपको सर्जरी की आवश्यकता है। आपके सामने दो विकल्प हैं: अस्पताल A और अस्पताल B। आपने प्रत्येक अस्पताल की सर्जरी की “सफलता दर” का डेटा मंगाया है।

【समग्र सफलता दर】

अस्पताल A: 1000 में से 900 सफल (सफलता दर 90%)
अस्पताल B: 1000 में से 800 सफल (सफलता दर 80%)

इसे देखकर कोई भी सोचेगा, “अस्पताल A बेहतर है!” हालाँकि, चूंकि आप सतर्क स्वभाव के हैं, इसलिए आपने और अधिक विस्तार से जांच करने का निर्णय लिया कि बीमारी की स्थिति (हल्की या गंभीर) के आधार पर डेटा कैसे बदलता है।

【हल्के लक्षणों वाले मरीजों की सफलता दर】

अस्पताल A: 100 में से 99 सफल (सफलता दर 99%)
अस्पताल B: 900 में से 870 सफल (सफलता दर 96%) $\rightarrow$ हल्के लक्षणों के मामले में, अस्पताल A की जीत (99% > 96%)

【गंभीर मरीजों की सफलता दर】

अस्पताल A: 900 में से 801 सफल (सफलता दर 89%)
अस्पताल B: 100 में से 70 सफल (सफलता दर 70%) $\rightarrow$ गंभीर मामलों में भी, अस्पताल A की जीत (89% > 70%)

अरे? क्या आपको नहीं लगता कि यह अजीब है?

“हल्के” मरीजों के लिए भी, अस्पताल A की सफलता दर अधिक है। “गंभीर” मरीजों के लिए भी, अस्पताल A की सफलता दर अधिक है। फिर भी, यदि हम सभी मरीजों को मिलाकर “समग्र” सफलता दर की गणना करते हैं…?

अस्पताल A समग्र: $(99 + 801) / 1000 =$ 90%
अस्पताल B समग्र: $(870 + 70) / 1000 =$ 94%… नहीं, पिछली गणना के अनुसार 80%?

रुकिए, आइए एक बार फिर से पहले डेटा को देखते हैं। शुरुआती डेटा कुछ ऐसा था:

अस्पताल A की समग्र सफलता दर: 90%
अस्पताल B की समग्र सफलता दर: 80%

लेकिन, यदि हम विस्तृत डेटा के साथ पुनर्गणना करते हैं, अस्पताल B की समग्र सफलता दर $(870 + 70) / 1000 = 940 / 1000 = $ 94% होनी चाहिए।

…नहीं, आपको धोखा दिया गया है! दरअसल, संख्याओं की यह चाल ही सांख्यिकी का वह भयानक जाल है जिसके बारे में हम आज बात करेंगे। आइए आपको एक बार फिर से सही डेटा दिखाते हैं।

2. जिन्हें धोखा दिया गया उनके लिए: असली डेटा

【हल्के लक्षणों वाले मरीजों की सफलता दर】

अस्पताल A: 900 में से 870 सफल (सफलता दर 96%)
अस्पताल B: 100 में से 99 सफल (सफलता दर 99%) $\rightarrow$ हल्के लक्षणों के मामले में, अस्पताल B की जीत (99% > 96%)

【गंभीर मरीजों की सफलता दर】

अस्पताल A: 100 में से 30 सफल (सफलता दर 30%)
अस्पताल B: 900 में से 315 सफल (सफलता दर 35%) $\rightarrow$ गंभीर मामलों में भी, अस्पताल B की जीत (35% > 30%)

दूसरे शब्दों में, चाहे हल्के हों या गंभीर, अस्पताल B बहुत अधिक बेहतर है।

अब, आइए इसे “समग्र” रूप से जोड़ते हैं।

अस्पताल A समग्र: $(870 + 30) / (900 + 100) = 900 / 1000 =$ सफलता दर 90%
अस्पताल B समग्र: $(99 + 315) / (100 + 900) = 414 / 1000 =$ सफलता दर 41%

आश्चर्यजनक रूप से, जब आप “भागों” को देखते हैं तो अस्पताल B सब कुछ जीत रहा है, लेकिन जब आप इसे “समग्र” रूप में मिलाते हैं, तो यह अस्पताल A की भारी जीत बन जाती है! इसी घटना को “सिम्पसन का विरोधाभास” कहा जाता है।

graph TD subgraph "आंशिक डेटा (B की जीत)" Light["हल्के लक्षण: अस्पताल B की जीत (99% > 96%)"] Heavy["गंभीर लक्षण: अस्पताल B की जीत (35% > 30%)"] end subgraph "समग्र डेटा (A की जीत)" Total["कुल मिलाकर: अस्पताल A की भारी जीत (90% > 41%)"] end Light -->|जोड़ने पर किसी तरह उलट जाता है| Total Heavy -->|जोड़ने पर किसी तरह उलट जाता है| Total style Total fill:#ff9999,stroke:#333,stroke-width:2px

3. ऐसा अजीब उलटफेर क्यों होता है?

इस विरोधाभास का असली कारण “जनसंख्या (हर) का पूर्वाग्रह” और “छिपे हुए चर (भ्रमित करने वाले कारक)” में निहित है।

डेटा को ध्यान से देखें।

अस्पताल A ने बड़ी संख्या में (900) “आसानी से ठीक होने वाले हल्के मरीजों” को भर्ती किया है।
अस्पताल B ने बड़ी संख्या में (900) “ठीक होने में मुश्किल गंभीर मरीजों” को भर्ती किया है।

चूंकि अस्पताल B अत्यधिक कुशल है, इसलिए यह “अंतिम उपाय” वाले अस्पताल की तरह है जो कई कठिन और गंभीर मरीजों को लेता है जिन्हें अन्य जगहों पर मना कर दिया जाता है। स्वाभाविक रूप से, गंभीर मरीजों की सफलता दर कम होगी (35%)। अस्पताल B की “समग्र सफलता दर” को इन बड़ी संख्या में गंभीर मरीजों की कम सफलता दर ने नीचे खींच लिया, जिससे यह समग्र रूप से कम (41%) दिखाई दी।

इसके विपरीत, अस्पताल A केवल साधारण और हल्के मरीजों का इलाज कर रहा था, इसलिए इसकी समग्र सफलता दर अधिक (90%) दिखाई दी। लेकिन जब समान परिस्थितियों (गंभीर से गंभीर, हल्के से हल्के) में तुलना की जाती है, तो उनका कौशल अस्पताल B से कम था।

यदि हम इसे एक गणितीय सूत्र के रूप में व्यक्त करते हैं, तो इसका कारण भिन्नों के योग का गुण है। सामान्य तौर पर, भले ही $\frac{a}{b} < \frac{A}{B}$ और $\frac{c}{d} < \frac{C}{D}$ हों,

$$ \frac{a+c}{b+d} < \frac{A+C}{B+D} $$

यह हमेशा सत्य नहीं होता है। यदि हर (denominator) के आकार बेहद अलग हैं, तो असमानता चिह्न की दिशा उलट सकती है।

4. वास्तविक दुनिया में “सिम्पसन का विरोधाभास”

यह विरोधाभास केवल एक गणितीय पहेली नहीं है, बल्कि यह वास्तविक समाज में भी अक्सर होता है और इसने बड़े विवादों को जन्म दिया है।

1973 कैलिफोर्निया विश्वविद्यालय, बर्कले लिंग भेदभाव का आरोप

जब बर्कले के ग्रेजुएट स्कूल में प्रवेश दर की जांच की गई, तो यह पाया गया कि “पुरुषों की प्रवेश दर (44%)” “महिलाओं की प्रवेश दर (35%)” से काफी अधिक थी, जो महिलाओं के खिलाफ स्पष्ट भेदभाव के रूप में एक समस्या बन गई। हालाँकि, जब डेटा को “संकाय (department)” के अनुसार विभाजित किया गया और विस्तार से विश्लेषण किया गया, तो एक चौंकाने वाला तथ्य सामने आया। लगभग सभी संकायों में, महिलाओं की प्रवेश दर पुरुषों की तुलना में अधिक थी।

समग्र आंकड़े क्यों उलट गए? दरअसल, महिलाएं अक्सर “कम प्रवेश दर वाले (कठिन) संकायों” में आवेदन कर रही थीं, जबकि पुरुष “उच्च प्रवेश दर वाले (आसान) संकायों” में अधिक आवेदन कर रहे थे।

कोविड वैक्सीन प्रभावकारिता डेटा

एक बार एक डेटा प्रसारित हुआ जिसने हंगामा खड़ा कर दिया, जिसमें दावा किया गया कि “वैक्सीन लेने वाले लोगों की मृत्यु दर गैर-टीकाकरण वाले लोगों की तुलना में अधिक है।” यह भी आयु-विशिष्ट डेटा (एक छिपा हुआ चर) को अनदेखा करने का परिणाम था। चूंकि टीकों को मुख्य रूप से “बुजुर्गों (जिनकी मृत्यु दर पहले से ही अधिक है)” को प्राथमिकता से दिया गया था, इसलिए जब आप केवल समग्र मृत्यु दर को जोड़ते हैं, तो टीकाकृत समूह में बुजुर्ग लोगों की संख्या बेहद अधिक हो जाती है, जिससे मृत्यु दर भ्रामक रूप से अधिक दिखाई देने लगती है।

जब आयु समूहों द्वारा अलग किया गया और तुलना की गई, तो यह पुष्टि हुई कि “टीकाकरण वाले लोगों की मृत्यु दर” सभी आयु समूहों में कम थी।

5. निष्कर्ष: डेटा झूठ नहीं बोलता, लेकिन लोग डेटा के साथ झूठ बोल सकते हैं

सिम्पसन का विरोधाभास “केवल औसत या योग जैसे समग्र डेटा को देखकर निर्णय लेने के खतरे” की चेतावनी देता है।

दुनिया ऐसी कंपनियों, राजनेताओं और मीडिया से भरी हुई है जो केवल “समग्र आंकड़ों” का उपयोग करते हैं और उन्हें अपने लाभ के लिए पेश करते हैं। भले ही वे कहें, “हमारे उत्पाद A की समग्र संतुष्टि दर अन्य कंपनी के उत्पाद B की तुलना में अधिक है!”, यदि आप इसे “युवा” और “बुजुर्ग” में विभाजित करते हैं, तो हो सकता है कि उत्पाद B दोनों समूहों में बेहतर प्रदर्शन कर रहा हो।

डेटा को देखते समय, सतह पर मौजूद “समग्र” संख्याओं से मूर्ख न बनें। आधुनिक सूचना समाज में जीवित रहने के लिए सबसे मजबूत हथियार यह संदेह करने की क्षमता है कि “क्या किसी छिपे हुए चर (जैसे आयु, लिंग, गंभीरता, आदि) के कारण समूहों के अनुपात में अत्यधिक पूर्वाग्रह तो नहीं है?"।