Công Cụ Tính Đồng Thuận Delphi
Dán điểm đánh giá của mỗi vòng Delphi — mỗi hàng một thành viên hội đồng, mỗi cột một mục — và nhận trung vị, khoảng tứ phân vị (IQR), trung bình, cùng tỷ lệ đồng ý và không đồng ý cho từng mục; rồi kiểm tra chúng theo các quy tắc đồng thuận bạn chọn: ngưỡng tỷ lệ đồng ý, giới hạn IQR, mức sàn trung vị và độ ổn định giữa các vòng. Công cụ chạy trong trình duyệt và không tải dữ liệu nào lên. Miễn phí, không cần đăng ký.
Thay đổi thang sẽ đặt lại các ngưỡng này về mức khởi đầu thông thường. Hãy đặt chúng theo giao thức của bạn.
Quy tắc đồng thuận
Không có định nghĩa duy nhất về đồng thuận trong nghiên cứu Delphi. Hãy bật các quy tắc mà giao thức của bạn đã đặt trước; một mục đạt đồng thuận khi mọi quy tắc đã bật đều được đáp ứng.
Tứ phân vị — và do đó IQR — phụ thuộc vào phương pháp, nhất là trong hội đồng nhỏ. Hãy báo cáo phương pháp bạn đã dùng.
Các vòng
Dán một bảng cho mỗi vòng: mỗi hàng là một thành viên và mỗi cột là một mục, theo cùng thứ tự mục ở mọi vòng. Ô trống là đánh giá bị thiếu.
Kết quả
Dán ít nhất một vòng đánh giá để xem thống kê.
Cách Sử Dụng Công Cụ Tính Đồng Thuận Delphi
- 1. Đặt thang điểm và các ngưỡng. Chọn thang đánh giá, rồi nói rõ mức nào được tính là đồng ý (ví dụ 4 và 5 trên thang năm điểm) và mức nào là không đồng ý.
- 2. Bật các quy tắc của bạn. Đánh dấu những quy tắc đồng thuận mà giao thức nghiên cứu đã đặt trước vòng 1 và đặt ngưỡng cho chúng. Một mục đạt đồng thuận khi mọi quy tắc đã bật đều được đáp ứng.
- 3. Dán các vòng. Mỗi vòng một bảng, với thành viên ở hàng và mục ở cột, theo cùng thứ tự mục ở mỗi vòng. Ô trống được tính là thiếu, còn điểm nằm ngoài thang sẽ bị loại và được báo.
- 4. Đọc kết quả. Mỗi vòng hiển thị n, trung vị, IQR, trung bình, tỷ lệ đồng ý và không đồng ý, cùng một kết quả với các quy tắc chưa đạt được nêu tên. Một bảng thứ hai theo dõi từng mục qua các vòng, và bạn có thể sao chép hoặc tải xuống mọi thứ.
Không Có Định Nghĩa Duy Nhất Về Đồng Thuận
Phương pháp Delphi yêu cầu một hội đồng đánh giá các mục qua nhiều vòng, với kết quả nhóm được phản hồi giữa các vòng để thành viên có thể cân nhắc lại. Điều phương pháp này không cung cấp là một tiêu chuẩn cho thời điểm nhóm đạt đồng thuận. Một tổng quan hệ thống về 100 nghiên cứu Delphi (Diamond và cộng sự, 2014) cho thấy khoảng 98 nghiên cứu tuyên bố có đánh giá đồng thuận, chỉ 72 nghiên cứu định nghĩa nó, và chỉ 42 trong số các nghiên cứu kết luận đã đạt đồng thuận có đặt ngưỡng từ trước. Kết luận của các tác giả là các định nghĩa khác nhau rất nhiều và được báo cáo kém. Vì vậy công cụ này áp dụng định nghĩa của bạn và hiển thị cách tính, thay vì áp đặt một định nghĩa.
| Quy tắc | Quy ước phổ biến | Nguồn gốc |
|---|---|---|
| Tỷ lệ đồng ý | 70–80% thành viên chấm trong vùng đồng ý; 75% là lựa chọn thường gặp nhất | Định nghĩa phổ biến nhất trong Diamond và cộng sự (2014), ngưỡng trung vị 75% |
| Khoảng tứ phân vị | IQR ≤ 1 trên thang năm điểm | Một quy ước được dùng rộng rãi; các tiêu chí được xem xét trong von der Gracht (2012) |
| Trung vị | Trung vị ở mức sàn trở lên, chẳng hạn 4 trên thang năm điểm, để mục được giữ lại | Quy tắc đưa vào riêng theo từng nghiên cứu |
| Độ ổn định | Tỷ lệ đồng ý thay đổi ít giữa các vòng | Tùy từng nghiên cứu; hãy đặt giới hạn của riêng bạn |
Hãy coi hai hàng đầu là quy ước chứ không phải tiêu chuẩn: đó là những gì nhiều nghiên cứu đã chọn, và một giao thức chọn giá trị khác vẫn có thể hoàn toàn hợp lý nếu nêu rõ từ trước. Diamond và cộng sự cũng thấy chỉ 23 nghiên cứu gắn việc dừng với việc đạt đồng thuận, còn 70 nghiên cứu chỉ dừng sau một số vòng đã định.
Vì Sao Phương Pháp Tứ Phân Vị Quan Trọng
IQR là Q3 trừ Q1, và phần mềm khác nhau về cách tìm một tứ phân vị. Với các điểm 1, 2, 3, 4, 5, phương pháp bao gồm (Excel QUARTILE.INC, mặc định của R) cho IQR là 2, trong khi phương pháp loại trừ (QUARTILE.EXC, SPSS) và phương pháp trung vị của hai nửa đều cho 3. Với một hội đồng từ 10 đến 20 người trên thang năm điểm, đó là sự khác biệt giữa đạt quy tắc IQR ≤ 1 và trượt. Hãy chọn một phương pháp, nêu rõ trong giao thức, và báo cáo lại.
Ví Dụ Minh Họa
Nhấn Tải ví dụ: 12 thành viên chấm sáu thành phần của khóa học từ 1 đến 5 qua hai vòng. Đồng ý là điểm 4 hoặc 5, và các quy tắc là tỷ lệ đồng ý ít nhất 75% và IQR từ 1 trở xuống. Ở vòng 1, ba mục đạt đồng thuận. Đăng ký trước thì không: trung vị là 3, IQR là 1,25, và 33% đồng ý. Ở vòng 2, nó có trung vị 4, IQR 0,25, và đúng 75% đồng ý, vừa đủ ngưỡng. Đọc bài báo gốc đi từ 67% lên 92%. Phương pháp định tính bị loại: chỉ 8% đồng ý và 33% không đồng ý, nên xu hướng hướng về không đồng ý nhưng chưa đạt 75% cần thiết. Đến vòng 2, năm trong sáu mục đạt đồng thuận.
Báo Cáo Đồng Thuận
- Nêu rõ quy tắc trước vòng 1. Thang điểm, vùng đồng ý, ngưỡng, và mọi quy tắc về IQR, trung vị hoặc độ ổn định.
- Báo cáo từng vòng. Số thành viên được mời và phản hồi, số mục được đánh giá, và số mục đạt đồng thuận, cùng trung vị và IQR hoặc tỷ lệ đồng ý cho từng mục.
- Nêu rõ phương pháp tứ phân vị nếu bạn báo cáo IQR.
- Cho biết cách bạn dừng. Dừng khi đạt đồng thuận, khi ổn định, hay sau một số vòng đã lên kế hoạch.
Tài Liệu Tham Khảo
- Diamond, I. R., Grant, R. C., Feldman, B. M., Pencharz, P. B., Ling, S. C., Moore, A. M., & Wales, P. W. (2014). Defining consensus: A systematic review recommends methodologic criteria for reporting of Delphi studies. Journal of Clinical Epidemiology, 67(4), 401–409. https://doi.org/10.1016/j.jclinepi.2013.12.002
- von der Gracht, H. A. (2012). Consensus measurement in Delphi studies: Review and implications for future quality assurance. Technological Forecasting and Social Change, 79(8), 1525–1536. https://doi.org/10.1016/j.techfore.2012.04.013
Công Cụ Này Không Làm Gì
Nó tóm tắt điểm đánh giá và áp dụng các quy tắc; nó không thiết kế nghiên cứu, không chọn hội đồng, và không tiến hành các vòng. Sự đồng thuận giữa các thành viên không phải là bằng chứng rằng họ đúng, và tỷ lệ đồng ý cao trong một hội đồng nhỏ rất dễ vỡ. Hãy báo cáo quy mô hội đồng bên cạnh mọi tỷ lệ phần trăm.
Câu Hỏi Thường Gặp
- Đồng thuận trong nghiên cứu Delphi là gì?
- Không có một định nghĩa duy nhất. Các nghiên cứu thường định nghĩa nó là tỷ lệ đồng ý tối thiểu (thường khoảng 75%), khoảng tứ phân vị tối đa, hoặc cả hai, và đôi khi đòi hỏi sự ổn định qua các vòng. Dù chọn gì, hãy đặt định nghĩa trước vòng đầu tiên và báo cáo lại.
- Tỷ lệ đồng ý bao nhiêu thì được coi là đồng thuận trong Delphi?
- Ngưỡng từ 70% đến 80% là phổ biến, và trong tổng quan hệ thống của Diamond và cộng sự (2014), ngưỡng trung vị giữa các nghiên cứu dùng tỷ lệ đồng ý là 75%. Đó là một quy ước chứ không phải quy tắc. Hãy chọn giá trị phù hợp với thang điểm và quy mô hội đồng của bạn, và biện minh cho nó.
- IQR từ 1 trở xuống có nghĩa gì với đồng thuận?
- Trên thang năm điểm, nửa giữa các đánh giá trải rộng tối đa một điểm trên thang, nghĩa là hầu hết thành viên gần nhau. Đây là một quy ước được dùng rộng rãi. Trên thang dài hơn, cùng giới hạn đó sẽ nghiêm ngặt hơn, nên hãy đặt ngưỡng phù hợp với thang của bạn; đó là điều bạn tự định nghĩa.
- Một nghiên cứu Delphi cần bao nhiêu vòng?
- Thường là hai hoặc ba vòng, nhưng số vòng nên theo giao thức của bạn. Dừng khi các tiêu chí đã nêu được đáp ứng, hoặc khi điểm không còn thay đổi, hoặc sau một số vòng đã lên kế hoạch trước, và nói rõ bạn dừng theo cách nào. Diamond và cộng sự thấy hầu hết nghiên cứu dừng sau một số vòng đã định thay vì khi đạt đồng thuận.
- Trích dẫn Diamond và cộng sự (2014) theo APA thế nào?
- Diamond, I. R., Grant, R. C., Feldman, B. M., Pencharz, P. B., Ling, S. C., Moore, A. M., & Wales, P. W. (2014). Defining consensus: A systematic review recommends methodologic criteria for reporting of Delphi studies. Journal of Clinical Epidemiology, 67(4), 401–409. https://doi.org/10.1016/j.jclinepi.2013.12.002
- Tôi xử lý thành viên bỏ qua một mục thế nào?
- Để trống ô đó. Thống kê của mục dùng các đánh giá mà nó nhận được, và n được hiển thị bên cạnh để người đọc thấy có bao nhiêu thành viên đứng sau một tỷ lệ phần trăm. Hãy báo cáo số lượng không phản hồi theo từng vòng trong phần phương pháp.
- Công cụ này có lưu điểm đánh giá của hội đồng tôi không?
- Không. Việc tính toán chạy trong trình duyệt và không có gì được tải lên. Nếu các đánh giá có thể nhận diện được người, hãy dùng mã thành viên thay vì tên ở cột đầu tiên.