Calculateur de consensus Delphi
Collez les évaluations de chaque tour Delphi — une ligne par panéliste, une colonne par item — et obtenez, pour chaque item, la médiane, l'écart interquartile, la moyenne, ainsi que le pourcentage d'accord et de désaccord. Testez ensuite ces valeurs selon les règles de consensus de votre choix : un seuil d'accord en pourcentage, une limite d'EIQ, un plancher pour la médiane et la stabilité d'un tour à l'autre. Le calcul se fait dans votre navigateur et rien n'est téléversé. Gratuit, sans inscription.
Changer l'échelle remet ces valeurs à des points de départ courants. Réglez-les selon ce que précise votre protocole.
Règles de consensus
Il n'existe pas de définition unique du consensus dans les études Delphi. Activez les règles que votre protocole a fixées à l'avance ; un item atteint le consensus lorsque toutes les règles activées sont respectées.
Les quartiles, et donc l'EIQ, dépendent de la méthode, surtout dans les petits panels. Indiquez celle que vous avez utilisée.
Tours
Collez un tableau par tour : une ligne par panéliste et une colonne par item, dans le même ordre d'items à chaque tour. Les cases vides sont des notes manquantes.
Résultats
Collez au moins un tour de notes pour voir les statistiques.
Comment utiliser le calculateur de consensus Delphi
- 1. Choisissez l'échelle et les seuils. Choisissez l'échelle de notation, puis indiquez quelles notes comptent comme accord (par exemple 4 et 5 sur une échelle à cinq points) et lesquelles comptent comme désaccord.
- 2. Activez vos règles. Cochez les règles de consensus fixées par votre protocole avant le tour 1 et réglez leurs seuils. Un item atteint le consensus lorsque toutes les règles cochées sont respectées.
- 3. Collez les tours. Un tableau par tour, avec les panélistes en lignes et les items en colonnes, dans le même ordre d'items à chaque tour. Les cases vides comptent comme valeurs manquantes, et les notes hors échelle sont écartées et signalées.
- 4. Lisez les résultats. Chaque tour affiche n, la médiane, l'EIQ, la moyenne, les pourcentages d'accord et de désaccord, et un résultat accompagné des règles non respectées. Un second tableau suit chaque item d'un tour à l'autre, et vous pouvez tout copier ou télécharger.
Il n'existe pas de définition unique du consensus
La méthode Delphi demande à un panel de noter des items sur plusieurs tours, en renvoyant les résultats du groupe entre les tours pour que les panélistes puissent reconsidérer leur avis. Elle ne fournit pas en revanche de norme sur le moment où le groupe est d'accord. Une revue systématique de 100 études Delphi (Diamond et al., 2014) a constaté qu'environ 98 prétendaient évaluer le consensus, que seules 72 le définissaient, et que seules 42 des études concluant à un consensus avaient fixé un seuil à l'avance. Les auteurs concluent que les définitions varient beaucoup et sont mal rapportées. Cet outil applique donc votre définition et montre son raisonnement, plutôt que d'en imposer une.
| Règle | Convention courante | Origine |
|---|---|---|
| Accord en pourcentage | 70 à 80 % des panélistes notant dans la zone d'accord ; 75 % est le choix le plus courant | Définition la plus répandue chez Diamond et al. (2014), seuil médian de 75 % |
| Écart interquartile | EIQ ≤ 1 sur une échelle à 5 points | Convention largement utilisée ; critères examinés dans von der Gracht (2012) |
| Médiane | Médiane au moins égale à un plancher, par exemple 4 sur une échelle à 5 points, pour qu'un item soit retenu | Règle d'inclusion propre à l'étude |
| Stabilité | Faible variation de la part des panélistes d'accord entre les tours | Propre à l'étude ; fixez votre propre limite |
Considérez les deux premières lignes comme des conventions, non comme des normes : ce sont celles que beaucoup d'études ont retenues, et un protocole qui choisit d'autres valeurs peut être parfaitement solide, à condition de les énoncer d'abord. Diamond et al. ont aussi constaté que seules 23 études liaient l'arrêt à l'atteinte du consensus, tandis que 70 s'arrêtaient simplement après un nombre fixé de tours.
Pourquoi la méthode des quartiles compte
L'EIQ est Q3 moins Q1, et les logiciels ne s'accordent pas sur la façon de calculer un quartile. Pour les notes 1, 2, 3, 4, 5, la méthode inclusive (Excel QUARTILE.INC, valeur par défaut de R) donne un EIQ de 2, tandis que la méthode exclusive (QUARTILE.EXC, SPSS) et la méthode de la médiane des moitiés donnent toutes deux 3. Avec un panel de 10 à 20 personnes sur une échelle à cinq points, cela fait la différence entre respecter une règle EIQ ≤ 1 et la manquer. Choisissez une méthode, énoncez-la dans votre protocole et indiquez-la.
Un exemple commenté
Cliquez sur Charger l'exemple : 12 panélistes notent six items d'un cours, de 1 à 5, sur deux tours. L'accord correspond à une note de 4 ou 5, et les règles sont un accord d'au moins 75 % et un EIQ de 1 ou moins. Au tour 1, trois items atteignent le consensus. Le préenregistrement n'y parvient pas : sa médiane est de 3, son EIQ de 1,25, et 33 % sont d'accord. Au tour 2, sa médiane passe à 4, son EIQ à 0,25, et exactement 75 % sont d'accord : il atteint donc tout juste le seuil. La lecture d'articles primaires passe de 67 % à 92 %. Les méthodes qualitatives restent exclues : seulement 8 % sont d'accord et 33 % sont en désaccord. La tendance va vers le désaccord, mais sans atteindre les 75 % requis. Au tour 2, cinq des six items sont en consensus.
Rapporter le consensus
- Fixez les règles avant le tour 1. L'échelle, la zone d'accord, le seuil, et toute règle portant sur l'EIQ, la médiane ou la stabilité.
- Rapportez chaque tour. Panélistes invités et ayant répondu, items notés, et items atteignant le consensus, avec la médiane et l'EIQ ou le pourcentage d'accord pour chaque item.
- Précisez la méthode des quartiles si vous rapportez un EIQ.
- Indiquez comment vous vous êtes arrêté : sur consensus, sur stabilité ou après un nombre de tours planifié.
Références
- Diamond, I. R., Grant, R. C., Feldman, B. M., Pencharz, P. B., Ling, S. C., Moore, A. M., & Wales, P. W. (2014). Defining consensus: A systematic review recommends methodologic criteria for reporting of Delphi studies. Journal of Clinical Epidemiology, 67(4), 401–409. https://doi.org/10.1016/j.jclinepi.2013.12.002
- von der Gracht, H. A. (2012). Consensus measurement in Delphi studies: Review and implications for future quality assurance. Technological Forecasting and Social Change, 79(8), 1525–1536. https://doi.org/10.1016/j.techfore.2012.04.013
Ce que ce calculateur ne fait pas
Il résume des évaluations et applique des règles ; il ne conçoit pas l'étude, ne choisit pas le panel et ne conduit pas les tours. L'accord entre panélistes n'est pas une preuve qu'ils ont raison, et un fort pourcentage d'accord sur un petit panel est fragile. Indiquez la taille du panel à côté de chaque pourcentage.
Questions fréquentes
- Qu'est-ce que le consensus dans une étude Delphi ?
- Il n'existe pas de définition unique. Les études définissent généralement le consensus par un pourcentage d'accord minimal (souvent environ 75 %), un écart interquartile maximal, ou les deux, et exigent parfois une stabilité d'un tour à l'autre. Quelle que soit votre définition, fixez-la avant le premier tour et indiquez-la.
- Quel pourcentage d'accord constitue un consensus dans une étude Delphi ?
- Des seuils entre 70 % et 80 % sont courants ; dans la revue systématique de Diamond et al. (2014), le seuil médian parmi les études utilisant l'accord en pourcentage était de 75 %. C'est une convention, non une règle. Choisissez une valeur adaptée à votre échelle et à la taille de votre panel, et justifiez-la.
- Que signifie un EIQ de 1 ou moins pour le consensus ?
- Sur une échelle à cinq points, la moitié centrale des notes ne s'étend pas au-delà d'un point d'échelle : la plupart des panélistes sont donc proches les uns des autres. C'est une convention largement utilisée. Sur une échelle plus longue, la même limite est plus stricte : réglez le seuil en fonction de votre échelle, car c'est à vous de le définir.
- Combien de tours une étude Delphi nécessite-t-elle ?
- Deux ou trois tours sont habituels, mais leur nombre doit suivre votre protocole. Arrêtez-vous lorsque vos critères énoncés sont atteints, lorsque les notes cessent de changer, ou après un nombre de tours prévu à l'avance, et précisez lequel. Diamond et al. ont constaté que la plupart des études s'arrêtaient après un nombre fixé de tours plutôt que sur consensus.
- Comment citer Diamond et al. (2014) en APA ?
- Diamond, I. R., Grant, R. C., Feldman, B. M., Pencharz, P. B., Ling, S. C., Moore, A. M., & Wales, P. W. (2014). Defining consensus: A systematic review recommends methodologic criteria for reporting of Delphi studies. Journal of Clinical Epidemiology, 67(4), 401–409. https://doi.org/10.1016/j.jclinepi.2013.12.002
- Que faire des panélistes qui sautent un item ?
- Laissez la case vide. Les statistiques de l'item utilisent les notes qu'il a reçues, et n est affiché à côté pour que le lecteur voie combien de panélistes sous-tendent un pourcentage. Signalez les non-réponses par tour dans votre méthodologie.
- Cet outil conserve-t-il les notes de mon panel ?
- Non. Le calcul se fait dans votre navigateur et rien n'est téléversé. Si vos notes sont identifiables, utilisez des codes de panélistes plutôt que des noms dans la première colonne.