Kalkulator Konsensus Delphi
Tempelkan penilaian setiap putaran Delphi — satu baris per panelis, satu kolom per item — dan dapatkan median, rentang interkuartil, rata-rata, serta persentase setuju dan tidak setuju untuk setiap item. Lalu uji hasilnya terhadap aturan konsensus yang Anda pilih: ambang persentase setuju, batas IQR, batas bawah median, dan stabilitas antarputaran. Berjalan di browser Anda dan tidak ada yang diunggah. Gratis, tanpa perlu mendaftar.
Mengubah skala akan mengatur ulang ini ke titik awal yang umum. Atur sesuai yang ditetapkan protokol Anda.
Aturan konsensus
Tidak ada satu definisi konsensus dalam studi Delphi. Aktifkan aturan yang ditetapkan protokol Anda sebelumnya; suatu item mencapai konsensus bila setiap aturan yang aktif terpenuhi.
Kuartil — dan karena itu IQR — bergantung pada metode, terutama pada panel kecil. Laporkan metode yang Anda gunakan.
Putaran
Tempelkan satu tabel per putaran: satu baris per panelis dan satu kolom per item, dengan urutan item yang sama setiap putaran. Sel kosong berarti penilaian yang hilang.
Hasil
Tempelkan setidaknya satu putaran penilaian untuk melihat statistiknya.
Cara Menggunakan Kalkulator Konsensus Delphi
- 1. Atur skala dan rentang. Pilih skala penilaian, lalu tentukan penilaian mana yang dihitung sebagai setuju (misalnya 4 dan 5 pada skala lima poin) dan mana yang dihitung sebagai tidak setuju.
- 2. Aktifkan aturan Anda. Centang aturan konsensus yang ditetapkan protokol Anda sebelum putaran 1 dan atur ambangnya. Suatu item mencapai konsensus bila setiap aturan yang dicentang terpenuhi.
- 3. Tempelkan putaran-putarannya. Satu tabel per putaran, dengan panelis di baris dan item di kolom, dalam urutan item yang sama setiap kali. Sel kosong dihitung sebagai data yang hilang, dan penilaian di luar skala dikeluarkan serta dilaporkan.
- 4. Baca hasilnya. Setiap putaran menampilkan n, median, IQR, rata-rata, persentase setuju dan tidak setuju, serta hasil dengan aturan yang tidak terpenuhi disebutkan. Tabel kedua mengikuti setiap item di seluruh putaran, dan Anda dapat menyalin atau mengunduh semuanya.
Tidak Ada Satu Definisi Konsensus
Metode Delphi meminta panel menilai item selama beberapa putaran, dengan umpan balik hasil kelompok di antara putaran agar panelis dapat mempertimbangkan kembali. Yang tidak disediakan metode ini adalah standar untuk kapan kelompok dianggap sepakat. Sebuah tinjauan sistematis terhadap 100 studi Delphi (Diamond et al., 2014) menemukan bahwa sekitar 98 mengklaim menilai konsensus, hanya 72 yang mendefinisikannya, dan hanya 42 dari studi yang menyimpulkan konsensus tercapai telah menetapkan ambang di muka. Kesimpulan penulisnya adalah definisinya sangat bervariasi dan dilaporkan dengan buruk. Oleh karena itu alat ini menerapkan definisi Anda dan menampilkan langkahnya, alih-alih memaksakan satu definisi.
| Aturan | Konvensi umum | Asal-usulnya |
|---|---|---|
| Persentase setuju | 70–80% panelis menilai di rentang setuju; 75% adalah pilihan yang umum | Definisi paling umum dalam Diamond et al. (2014), ambang median 75% |
| Rentang interkuartil | IQR ≤ 1 pada skala lima poin | Konvensi yang banyak dipakai; kriteria ditinjau dalam von der Gracht (2012) |
| Median | Median pada atau di atas batas bawah, misalnya 4 pada skala lima poin, agar item dipertahankan | Aturan inklusi khusus studi |
| Stabilitas | Perubahan kecil pada proporsi yang setuju antarputaran | Khusus studi; tetapkan batas Anda sendiri |
Perlakukan dua baris pertama sebagai konvensi, bukan standar: itulah yang dipilih banyak studi, dan protokol yang memilih nilai berbeda bisa saja tetap sah bila menyatakannya lebih dulu. Diamond et al. juga menemukan bahwa hanya 23 studi yang mengaitkan penghentian dengan tercapainya konsensus, sementara 70 studi berhenti begitu saja setelah jumlah putaran tertentu.
Mengapa Metode Kuartil Penting
IQR adalah Q3 dikurangi Q1, dan perangkat lunak berbeda pendapat tentang cara mencari kuartil. Untuk penilaian 1, 2, 3, 4, 5, metode inklusif (Excel QUARTILE.INC, bawaan R) memberi IQR 2, sedangkan metode eksklusif (QUARTILE.EXC, SPSS) dan metode median dari dua belahan keduanya memberi 3. Dengan panel 10 hingga 20 pada skala lima poin, itulah perbedaan antara memenuhi aturan IQR ≤ 1 dan gagal memenuhinya. Pilih satu metode, nyatakan dalam protokol Anda, dan laporkan.
Contoh Kerja
Tekan Muat contoh: 12 panelis menilai enam komponen kursus dari 1 sampai 5 selama dua putaran. Setuju adalah penilaian 4 atau 5, dan aturannya adalah setidaknya 75% setuju dan IQR 1 atau kurang. Pada putaran 1 tiga item mencapai konsensus. Preregistrasi tidak: medianya 3, IQR-nya 1,25, dan 33% setuju. Pada putaran 2 medianya 4, IQR-nya 0,25, dan tepat 75% setuju, sehingga memenuhi ambang batas. Membaca makalah primer naik dari 67% menjadi 92%. Metode kualitatif tetap di luar: hanya 8% setuju dan 33% tidak setuju, jadi arahnya menuju ketidaksetujuan tetapi belum mencapai 75% yang diperlukan. Pada putaran 2, lima dari enam item berada dalam konsensus.
Melaporkan Konsensus
- Nyatakan aturannya sebelum putaran 1. Skala, rentang setuju, ambang, dan aturan apa pun tentang IQR, median, atau stabilitas.
- Laporkan setiap putaran. Panelis yang diundang dan yang merespons, item yang dinilai, dan item yang mencapai konsensus, dengan median dan IQR atau persentase setuju untuk setiap item.
- Sebutkan metode kuartil jika Anda melaporkan IQR.
- Jelaskan bagaimana Anda berhenti. Apakah Anda berhenti karena konsensus, karena stabilitas, atau setelah jumlah putaran yang direncanakan.
Referensi
- Diamond, I. R., Grant, R. C., Feldman, B. M., Pencharz, P. B., Ling, S. C., Moore, A. M., & Wales, P. W. (2014). Defining consensus: A systematic review recommends methodologic criteria for reporting of Delphi studies. Journal of Clinical Epidemiology, 67(4), 401–409. https://doi.org/10.1016/j.jclinepi.2013.12.002
- von der Gracht, H. A. (2012). Consensus measurement in Delphi studies: Review and implications for future quality assurance. Technological Forecasting and Social Change, 79(8), 1525–1536. https://doi.org/10.1016/j.techfore.2012.04.013
Apa yang tidak dilakukan kalkulator ini
Alat ini merangkum penilaian dan menerapkan aturan; ia tidak merancang studi, memilih panel, atau menjalankan putaran. Kesepakatan antarpanelis bukan bukti bahwa mereka benar, dan persentase setuju yang tinggi pada panel kecil itu rapuh. Laporkan ukuran panel di samping setiap persentase.
Pertanyaan yang Sering Diajukan
- Apa itu konsensus dalam studi Delphi?
- Tidak ada satu definisi. Studi biasanya mendefinisikannya sebagai persentase setuju minimum (sering sekitar 75%), rentang interkuartil maksimum, atau keduanya, dan kadang mensyaratkan stabilitas antarputaran. Apa pun yang Anda pilih, tetapkan definisinya sebelum putaran pertama dan laporkan.
- Persentase setuju berapa yang dihitung sebagai konsensus dalam Delphi?
- Ambang antara 70% dan 80% umum, dan dalam tinjauan sistematis oleh Diamond et al. (2014) ambang median di antara studi yang memakai persentase setuju adalah 75%. Itu konvensi, bukan aturan. Pilih nilai yang sesuai dengan skala dan ukuran panel Anda, dan berikan justifikasinya.
- Apa arti IQR 1 atau kurang untuk konsensus?
- Pada skala lima poin, separuh tengah penilaian mencakup paling banyak satu poin skala, sehingga sebagian besar panelis berdekatan satu sama lain. Ini adalah konvensi yang banyak dipakai. Pada skala yang lebih panjang, batas yang sama lebih ketat, jadi sesuaikan batasnya dengan skala Anda; itu hak Anda untuk menentukan.
- Berapa putaran yang dibutuhkan studi Delphi?
- Dua atau tiga putaran adalah yang biasa, tetapi jumlahnya harus mengikuti protokol Anda. Berhentilah ketika kriteria yang Anda nyatakan terpenuhi, ketika penilaian berhenti berubah, atau setelah jumlah putaran yang telah direncanakan, dan sebutkan yang mana. Diamond et al. menemukan bahwa sebagian besar studi berhenti setelah jumlah putaran tertentu, bukan karena konsensus.
- Bagaimana cara mengutip Diamond et al. (2014) dalam APA?
- Diamond, I. R., Grant, R. C., Feldman, B. M., Pencharz, P. B., Ling, S. C., Moore, A. M., & Wales, P. W. (2014). Defining consensus: A systematic review recommends methodologic criteria for reporting of Delphi studies. Journal of Clinical Epidemiology, 67(4), 401–409. https://doi.org/10.1016/j.jclinepi.2013.12.002
- Bagaimana cara menangani panelis yang melewatkan suatu item?
- Biarkan selnya kosong. Statistik item menggunakan penilaian yang diterimanya, dan n ditampilkan di sampingnya sehingga pembaca dapat melihat berapa panelis yang mendukung suatu persentase. Laporkan non-respons per putaran dalam metode Anda.
- Apakah alat ini menyimpan penilaian panel saya?
- Tidak. Perhitungan berjalan di browser Anda dan tidak ada yang diunggah. Jika penilaian Anda dapat diidentifikasi, gunakan kode panelis, bukan nama, di kolom pertama.