डेल्फ़ाई कंसेंसस कैलकुलेटर

डेल्फ़ाई कंसेंसस कैलकुलेटर का उपयोग कैसे करें

1. 1. पैमाना और बैंड सेट करें। रेटिंग पैमाना चुनें, फिर बताएँ कि कौन-सी रेटिंग सहमति मानी जाए (उदाहरण के लिए पाँच-बिंदु पैमाने पर 4 और 5) और कौन-सी असहमति।
2. 2. अपने नियम चालू करें। वे कंसेंसस नियम चुनें जो आपके प्रोटोकॉल ने राउंड 1 से पहले तय किए थे, और उनकी सीमाएँ सेट करें। किसी आइटम पर कंसेंसस तब होता है जब हर चालू नियम पूरा हो।
3. 3. राउंड चिपकाएँ। हर राउंड की एक तालिका, जिसमें पंक्तियाँ पैनलिस्ट और कॉलम आइटम हों, और हर बार आइटम का क्रम एक-सा हो। खाली खानों को लापता माना जाता है, और पैमाने से बाहर की रेटिंग छोड़ दी जाती हैं और बताई जाती हैं।
4. 4. परिणाम पढ़ें। हर राउंड में n, मीडियन, IQR, मीन, % सहमत और % असहमत, और एक परिणाम दिखता है जिसमें अपूर्ण नियम नाम से लिखे होते हैं। हर आइटम के लिए राउंडों में फैली एक दूसरी तालिका आती है, और आप सब कुछ कॉपी या डाउनलोड कर सकते हैं।

कंसेंसस की कोई एक परिभाषा नहीं है

डेल्फ़ाई विधि एक पैनल से कई राउंडों में आइटमों को रेट कराती है, और राउंडों के बीच समूह के परिणाम वापस देती है ताकि पैनलिस्ट पुनर्विचार कर सकें। पर यह कोई मानदंड नहीं देती कि समूह कब सहमत माना जाए। डेल्फ़ाई अध्ययनों की एक व्यवस्थित समीक्षा (Diamond et al., 2014) में 100 अध्ययनों में से लगभग 98 ने कंसेंसस आँकने का दावा किया, केवल 72 ने उसे परिभाषित किया, और जिन अध्ययनों ने कंसेंसस हासिल होने का निष्कर्ष निकाला, उनमें से केवल 42 ने पहले से सीमा तय की थी। लेखकों का निष्कर्ष था कि परिभाषाएँ बहुत अलग-अलग हैं और ठीक से रिपोर्ट नहीं होतीं। इसलिए यह टूल आपकी परिभाषा लागू करता है और उसका हिसाब दिखाता है, किसी एक को थोपता नहीं।

पहली दो पंक्तियों को मानक नहीं, परंपराएँ मानें: यही वे मान हैं जो कई अध्ययनों ने चुने, और जो प्रोटोकॉल पहले से अलग मान बताता है, वह भी पूरी तरह सही हो सकता है। Diamond et al. ने यह भी पाया कि केवल 23 अध्ययनों ने रुकने को कंसेंसस हासिल करने से जोड़ा, जबकि 70 बस एक तय संख्या के राउंडों के बाद रुक गए।

क्वार्टाइल विधि क्यों मायने रखती है

IQR, Q3 − Q1 है, और सॉफ़्टवेयर इस पर असहमत हैं कि क्वार्टाइल कैसे निकाला जाए। रेटिंग 1, 2, 3, 4, 5 के लिए इनक्लूसिव विधि (Excel QUARTILE.INC, R का डिफ़ॉल्ट) IQR 2 देती है, जबकि एक्सक्लूसिव विधि (QUARTILE.EXC, SPSS) और हाफ़-मीडियन विधि, दोनों 3 देती हैं। पाँच-बिंदु पैमाने पर 10 से 20 पैनलिस्टों के साथ, यही अंतर है IQR ≤ 1 नियम पर खरा उतरने और चूकने के बीच। एक विधि चुनें, उसे प्रोटोकॉल में लिखें, और रिपोर्ट करें।

एक कार्यान्वित उदाहरण

उदाहरण लोड करें दबाएँ: 12 पैनलिस्ट दो राउंडों में, पाठ्यक्रम के छह घटकों को 1 से 5 तक रेट करते हैं। सहमति 4 या 5 है, और नियम हैं कम से कम 75% सहमति और 1 या उससे कम IQR। राउंड 1 में तीन आइटम कंसेंसस तक पहुँचते हैं। पूर्वपंजीकरण नहीं: उसका मीडियन 3 है, IQR 1.25 है, और 33% सहमत हैं। राउंड 2 में उसका मीडियन 4, IQR 0.25, और ठीक 75% सहमत हैं, इसलिए वह सीमा पर खरा उतरता है। प्राथमिक शोधपत्र पढ़ना 67% से बढ़कर 92% पर पहुँचता है। गुणात्मक विधियाँ बाहर रहती हैं: केवल 8% सहमत हैं, और 33% असहमत हैं, इसलिए दिशा असहमति की ओर है, पर 75% की ज़रूरत से कम। राउंड 2 तक छह में से पाँच आइटम कंसेंसस में हैं।

कंसेंसस की रिपोर्टिंग

• नियम राउंड 1 से पहले बताएँ। पैमाना, सहमति बैंड, सीमा, और IQR, मीडियन या स्थिरता पर कोई भी नियम।
• हर राउंड रिपोर्ट करें। आमंत्रित और जवाब देने वाले पैनलिस्ट, रेट किए गए आइटम, और कंसेंसस तक पहुँचने वाले आइटम, हर आइटम के लिए मीडियन और IQR या % सहमति के साथ।
• क्वार्टाइल विधि का नाम बताएँ, यदि आप IQR रिपोर्ट करते हैं।
• बताएँ कि आप कैसे रुके। कंसेंसस पर, स्थिरता पर, या एक योजनाबद्ध संख्या के राउंडों के बाद।

संदर्भ

• Diamond, I. R., Grant, R. C., Feldman, B. M., Pencharz, P. B., Ling, S. C., Moore, A. M., & Wales, P. W. (2014). Defining consensus: A systematic review recommends methodologic criteria for reporting of Delphi studies. Journal of Clinical Epidemiology, 67(4), 401–409. https://doi.org/10.1016/j.jclinepi.2013.12.002
• von der Gracht, H. A. (2012). Consensus measurement in Delphi studies: Review and implications for future quality assurance. Technological Forecasting and Social Change, 79(8), 1525–1536. https://doi.org/10.1016/j.techfore.2012.04.013

अक्सर पूछे जाने वाले प्रश्न

डेल्फ़ाई अध्ययन में कंसेंसस क्या है?

इसकी कोई एक परिभाषा नहीं है। अध्ययन आमतौर पर इसे न्यूनतम प्रतिशत सहमति (अक्सर लगभग 75%), अधिकतम इंटरक्वार्टाइल रेंज, या दोनों के रूप में परिभाषित करते हैं, और कभी-कभी राउंडों के बीच स्थिरता की माँग करते हैं। जो भी चुनें, पहले राउंड से पहले परिभाषा तय करें और उसे रिपोर्ट करें।

डेल्फ़ाई में कितने प्रतिशत सहमति को कंसेंसस माना जाए?

70% से 80% के बीच की सीमाएँ आम हैं, और Diamond et al. (2014) की व्यवस्थित समीक्षा में प्रतिशत सहमति इस्तेमाल करने वाले अध्ययनों में मीडियन सीमा 75% थी। यह एक परंपरा है, नियम नहीं। ऐसा मान चुनें जो आपके पैमाने और पैनल के आकार के अनुकूल हो, और उसका औचित्य दें।

कंसेंसस के लिए 1 या उससे कम IQR का क्या अर्थ है?

पाँच-बिंदु पैमाने पर बीच की आधी रेटिंग अधिकतम एक पैमाना-बिंदु फैली होती हैं, यानी ज़्यादातर पैनलिस्ट एक-दूसरे के करीब हैं। यह एक व्यापक रूप से इस्तेमाल होने वाली परंपरा है। लंबे पैमाने पर यही सीमा सख़्त होती है, इसलिए कट-ऑफ अपने पैमाने के अनुसार तय करें; यह आपकी परिभाषा है।

डेल्फ़ाई अध्ययन में कितने राउंड चाहिए?

दो या तीन राउंड आम हैं, पर संख्या आपके प्रोटोकॉल के अनुसार होनी चाहिए। तब रुकें जब आपके तय मानदंड पूरे हों, या जब रेटिंग बदलना बंद कर दें, या पूर्व-योजित संख्या के राउंडों के बाद — और बताएँ कि कौन-सा। Diamond et al. ने पाया कि अधिकांश अध्ययन कंसेंसस के बजाय एक तय संख्या के राउंडों के बाद रुके।

APA में Diamond et al. (2014) का उद्धरण कैसे दूँ?

Diamond, I. R., Grant, R. C., Feldman, B. M., Pencharz, P. B., Ling, S. C., Moore, A. M., & Wales, P. W. (2014). Defining consensus: A systematic review recommends methodologic criteria for reporting of Delphi studies. Journal of Clinical Epidemiology, 67(4), 401–409. https://doi.org/10.1016/j.jclinepi.2013.12.002

जो पैनलिस्ट कोई आइटम छोड़ दें, उनका क्या करें?

खाना खाली छोड़ दें। उस आइटम के आँकड़े उसे मिली रेटिंग से बनते हैं, और n उनके साथ दिखाया जाता है ताकि पाठक देख सके कि किसी प्रतिशत के पीछे कितने पैनलिस्ट हैं। हर राउंड में गैर-जवाब अपनी पद्धति में रिपोर्ट करें।

क्या यह टूल मेरे पैनल की रेटिंग संग्रहीत करता है?

नहीं। गणना आपके ब्राउज़र में होती है और कुछ भी अपलोड नहीं होता। यदि आपकी रेटिंग पहचान योग्य हैं, तो पहले कॉलम में नामों के बजाय पैनलिस्ट कोड इस्तेमाल करें।