माप की वैधता और विश्वसनीयता

वैधता और विश्वसनीयता दो मुख्य गुण हैं जो यह निर्धारित करते हैं कि किसी गुणवत्ता माप पर भरोसा किया जा सकता है या नहीं। वैधता इस बात से संबंधित है कि क्या कोई माप वास्तव में गुणवत्ता के उस पहलू को दर्शाता है जिसे वह दर्शाने का दावा करता है; विश्वसनीयता इस बात से संबंधित है कि क्या माप समान परिस्थितियों में बार-बार लागू करने पर सुसंगत परिणाम देता है। गुणवत्ता के बारे में निर्णय या कार्रवाई करने के निर्णयों को सही ठहराने से पहले एक माप विश्वसनीय और वैध दोनों होना चाहिए।

Definition

विश्वसनीयता वह डिग्री है जिस तक एक माप बार-बार अनुप्रयोगों, मूल्यांकनकर्ताओं या मदों में सुसंगत, प्रतिलिपि प्रस्तुत करने योग्य परिणाम देता है; वैधता वह डिग्री है जिस तक एक माप अंतर्निहित निर्माण को सटीक रूप से दर्शाता है, यहाँ स्वास्थ्य सेवा की गुणवत्ता का एक पहलू है, जिसे वह आकलन करने का इरादा रखता है।

Scope

यह प्रविष्टि वैधता और विश्वसनीयता के प्रमुख रूपों को शामिल करती है क्योंकि वे गुणवत्ता संकेतकों और उपकरणों पर लागू होते हैं, उन्हें मापने के लिए आमतौर पर उपयोग किए जाने वाले आँकड़े, और क्यों दोनों गुण उन मापों के लिए महत्वपूर्ण हैं जिनके परिणाम होते हैं। यह एक पद्धतिगत संदर्भ है और किसी विशिष्ट उपकरण के लिए नैदानिक स्कोरिंग थ्रेशोल्ड प्रदान नहीं करता है।

Core questions

• किसी गुणवत्ता माप के वैध होने का क्या अर्थ है, और वैधता का आकलन कैसे किया जाता है?
• विश्वसनीयता को वैधता से कैसे अलग किया जाता है, और दोनों क्यों आवश्यक हैं?
• कौन से आँकड़े आंतरिक संगति और अंतर-मूल्यांकनकर्ता समझौते को मापते हैं?
• खराब वैधता या विश्वसनीयता गुणवत्ता के बारे में निर्णयों को कैसे गुमराह करती है?

Key concepts

• सामग्री वैधता
• निर्माण वैधता
• मानदंड वैधता
• आंतरिक संगति (क्रोनबैक का अल्फा)
• अंतर-मूल्यांकनकर्ता विश्वसनीयता (कोहेन का कप्पा)
• परीक्षण-पुनःपरीक्षण विश्वसनीयता
• माप त्रुटि और यादृच्छिक भिन्नता

Key theories

विश्वसनीयता का शास्त्रीय परीक्षण सिद्धांत

शास्त्रीय परीक्षण सिद्धांत एक देखे गए माप को एक सच्चे मूल्य और यादृच्छिक त्रुटि के योग के रूप में फ्रेम करता है, इसलिए विश्वसनीयता देखे गए विचरण का वह अनुपात है जो त्रुटि के बजाय सच्चे अंतरों के लिए जिम्मेदार है। क्रोनबैक का गुणांक अल्फा इसे एक ही निर्माण को मापने के उद्देश्य से मदों के बीच आंतरिक संगति के एक रूप के रूप में संचालित करता है।

Mechanisms

विश्वसनीयता का आकलन दोहराव में माप की संगति की जाँच करके किया जाता है: मदों के बीच आंतरिक संगति, मूल्यांकनकर्ताओं के बीच समझौता, और समय के साथ स्थिरता जब अंतर्निहित स्थिति नहीं बदली है। क्रोनबैक का अल्फा बहु-मद पैमानों के लिए आंतरिक संगति को सारांशित करता है, जबकि कोहेन का कप्पा श्रेणीबद्ध निर्णयों पर दो मूल्यांकनकर्ताओं के बीच समझौते को मापता है, संयोग समझौते के लिए सुधार करता है। वैधता का आकलन इस बात के प्रमाण जमा करके किया जाता है कि माप अपने इच्छित निर्माण को दर्शाता है: सामग्री वैधता (अवधारणा का व्यापक कवरेज), निर्माण वैधता (अन्य मापों के साथ अपेक्षित संबंध), और मानदंड वैधता (एक संदर्भ मानक के साथ समझौता)। एक माप विश्वसनीय हो सकता है फिर भी अमान्य हो सकता है, लगातार गलत चीज़ को मापता है, लेकिन यह विश्वसनीय हुए बिना वैध नहीं हो सकता है, क्योंकि यादृच्छिक त्रुटि यह सीमित करती है कि एक माप अपने लक्ष्य को कितनी अच्छी तरह ट्रैक कर सकता है।

Clinical relevance

इससे पहले कि किसी गुणवत्ता संकेतक या रोगी-रिपोर्ट किए गए उपकरण का उपयोग रिपोर्टिंग, मान्यता या प्रोत्साहन के लिए किया जाए, इसकी वैधता और विश्वसनीयता स्थापित की जानी चाहिए ताकि देखे गए अंतर माप शोर के बजाय गुणवत्ता में वास्तविक भिन्नता को दर्शाते हैं। ये गुण किसी भी गुणवत्ता माप कार्यक्रम की व्याख्या के लिए केंद्रीय हैं। यह प्रविष्टि माप गुणों की व्याख्या करती है और व्यक्तिगत रोगियों के लिए नैदानिक स्कोरिंग नियमों का स्रोत नहीं है।

Evidence & guidelines

सांख्यिकीय आधार क्रोनबैक के गुणांक अल्फा और कोहेन के कप्पा से आते हैं, जिसमें स्वास्थ्य माप के लिए लागू मार्गदर्शन स्ट्रेनर और नॉर्मन के पाठ में समेकित है। संकेतक-वर्गीकरण मार्गदर्शन गुणवत्ता माप के भीतर इन गुणों को स्थापित करता है। इन स्रोतों को उनकी पद्धतिगत सामग्री के लिए उद्धृत किया गया है और ये नैदानिक निर्देश नहीं हैं।

History

वैधता और विश्वसनीयता की अवधारणाओं को बीसवीं सदी के मध्य में साइकोमेट्रिक्स के भीतर औपचारिक रूप दिया गया था, जिसमें क्रोनबैक का 1951 का अल्फा और कोहेन का 1960 का कप्पा मानक उपकरण बन गए थे। जैसे ही स्वास्थ्य सेवा ने रोगी-रिपोर्ट किए गए उपकरणों और गुणवत्ता संकेतकों को अपनाया, इन साइकोमेट्रिक सिद्धांतों को स्वास्थ्य सेवा माप में ले जाया गया और स्ट्रेनर और नॉर्मन जैसे व्यावहारिक गाइडों में संहिताबद्ध किया गया।

Debates

क्या क्रोनबैक का अल्फा विश्वसनीयता का एक पर्याप्त माप है?

अल्फा व्यापक रूप से रिपोर्ट किया जाता है लेकिन मदों की संख्या पर निर्भर करता है और एक एकल अंतर्निहित आयाम मानता है; उच्च अल्फा अच्छे माप के बजाय अतिरेक को दर्शा सकता है, और यह एक-आयामीता या वैधता स्थापित नहीं करता है, जिससे पूरक साक्ष्य के लिए आह्वान किया जाता है।

Key figures

• Lee Cronbach
• Jacob Cohen
• David Streiner
• Geoffrey Norman

Seminal works

• cronbach-1951
• cohen-1960
• streiner-norman-2015

Frequently asked questions

क्या कोई माप विश्वसनीय हो सकता है लेकिन वैध नहीं?

हाँ। एक माप लगातार गलत चीज़ को कैप्चर करते हुए अत्यधिक सुसंगत परिणाम दे सकता है। विश्वसनीयता वैधता के लिए आवश्यक है लेकिन इसकी गारंटी नहीं देती है; एक माप को यह भी दिखाया जाना चाहिए कि वह उस निर्माण को दर्शाता है जिसे वह आकलन करने का दावा करता है।

अंतर-मूल्यांकनकर्ता समझौते का आकलन करते समय संयोग के लिए सुधार क्यों करें?

दो मूल्यांकनकर्ता कभी-कभी पूरी तरह से संयोग से सहमत होंगे, खासकर कुछ श्रेणियों के साथ। कोहेन का कप्पा संयोग से अपेक्षित समझौते के लिए देखे गए समझौते को समायोजित करता है, जिससे सच्ची विश्वसनीयता का अधिक ईमानदार अनुमान मिलता है।