Critical Appraisal Skills Programme (CASP) Comprendre les

Critical Appraisal Skills Programme (CASP)1
Comprendre les données probantes
Dix questions pour mieux comprendre
les essais contrôlés randomisés
Comment utiliser cet outil d’évaluation
L’analyse de rapports issus des essais contrôlés randomisés exige de s’attarder
à trois grandes questions :
• L’essai est-il valide?
• Quels sont les résultats?
• Les résultats seront-ils utiles sur le plan local?
Les dix questions2 proposées ici sont conçues pour vous aider à réfléchir de
façon systématique aux divers éléments qu’elles abordent.
• Les deux premières questions sont des questions filtres, auxquelles on peut
répondre assez rapidement. Si on répond « oui » à ces deux questions, il vaut
la peine de passer aux prochaines questions.
• On vous demande de répondre « oui », « non » ou « ne peut déterminer » à la
plupart des questions.
• Après chacune des questions, certains conseils paraissent en italiques. Ils
visent à vous rappeler l’importance de la question. Consignez les raisons
soutenant vos réponses dans l’espace prévu à cette fin.
1
© Milton Keynes Primary Care Trust 2002. Tous droits réservés. Aucune partie de cette publication ne
peut être reproduite, mise en mémoire dans un système de recherche documentaire ni transmise sous
quelque forme ou par quelque procédé que ce soit: électronique, mécanique, par photocopie ou autre, sans
autorisation préalable de Milton Keynes Primary Care Trust. Lorsque l’autorisation est accordée, les copies
doivent comporter cet énoncé de même que les mots « © Milton Keynes Primary Care Trust 2002 ».
Cependant, les organisations peuvent reproduire ou utiliser cette publication à des fins éducatives et non
commerciales, pourvu que la source soit indiquée.
2
Les dix questions sont adaptées de Users’ guides to the medical literature. II. How to use an article about
therapy or prevention, Guyatt GH, Sackett DL et Cook DJ, JAMA 1993; 270 (21): 2598-2601 et JAMA 1994;
271(1):59-63.
Dix questions pour mieux comprendre les essais contrôlés randomisés
1
Questions filtres
1. L’étude abordait-elle une question
clairement définie?
Oui
Ne peut déterminer
Non
Oui
Ne peut déterminer
Non
Déterminez si la question est centrée sur :
• La population à l’étude
• L’intervention pratiquée
• Les issues examinées
2. S’agissait-il d’un essai contrôlé randomisé
(ECR) et est-ce que cette méthode était
appropriée?
Examinez :
• Ce pourquoi cette étude est menée sous forme d’essai
contrôlé randomisé.
• S’il s’agit bien de la bonne approche de recherche
considérant la question qui est posée.
Vaut-il la peine de poursuivre?
Questions détaillées
3. Les participants ont-ils été adéquatement
répartis dans les groupes « intervention »
et « contrôle »?
Oui
Ne peut déterminer
Non
Examinez les éléments suivants :
• Comment les participants ont été répartis dans les
groupes intervention et contrôle. Le processus était-il
vraiment aléatoire?
• La méthode de répartition est-elle décrite? A-t-on utilisé
une méthode permettant d’équilibrer la randomisation,
p.ex., la stratification?
• Comment on a généré la séquence de randomisation et
comment on assignait un participant à un groupe
d’étude.
• Les groupes étaient-ils bien équilibrés? A-t-on rapporté
des différences entre les groupes à l’entrée de l’essai?
• A-t-on rapporté des différences qui pourraient expliquer
certains des résultats (facteurs de confusion)?
Dix questions pour mieux comprendre les essais contrôlés randomisés
2
4. Pour la répartition dans les groupes
d’étude, a-t-on utilisé une méthode à
l’aveugle à l’égard des participants, des
chercheurs et du personnel travaillant à
l’essai?
Oui
Ne peut déterminer
Non
Oui
Ne peut déterminer
Non
Oui
Ne peut déterminer
Non
Examinez les éléments suivants :
• La méthode à l’aveugle n’est pas toujours possible.
• Tous les efforts ont-ils été investis pour réaliser les
démarches à l’aveugle?
• Est-ce que vous estimez que c’est important dans le
cadre de cette étude?
• Nous sommes à la recherche de « biais
d’observateur ».
5. À la conclusion de l’essai, pouvait-on
retracer tous les participants qui y étaient
entrés?
Examinez si :
• Les participants du groupe intervention ont bénéficié de
l’option groupe contrôle ou inversement.
• Tous les participants ont bénéficié d’un suivi dans le
cadre de chacun des groupes d’étude (y avait-il des
« perdus de vue » au suivi?).
• Toutes les issues chez les participants ont été
analysées en fonction des groupes auxquels ils ont
initialement été assignés (analyse en intention de
traiter).
• Vous auriez souhaité consulter des renseignements
supplémentaires, de sorte à être plus à l’aise en cette
matière.
6. A-t-on assuré le suivi auprès de chacun
des participants, au sein de tous les
groupes et les données ont-elles été
recueillies de la même manière?
Examinez :
• Par exemple, si les participants ont été revus au même
moment et s’ils ont reçu la même attention de la part
des chercheurs et des travailleurs de la santé. Toute
différence pourrait générer des biais de suivi.
Dix questions pour mieux comprendre les essais contrôlés randomisés
3
7. L’étude comportait-elle un nombre
suffisant de participants pour réduire les
effets du hasard?
Oui
Ne peut déterminer
Non
Examinez si :
• On a procédé à un calcul de la puissance de l’essai,
pour estimer le nombre de participants requis pour qu’il
soit raisonnable de s’attendre à faire une découverte
importante (si elle existe vraiment et selon un niveau
donné d’incertitude à l’égard du résultat final).
8. Comment les résultats sont-ils présentés
et quel est le résultat principal?
Inscrire vos commentaires
Examinez :
• Si, par exemple, les résultats sont présentés selon la
proportion des personnes vivant une issue donnée
(p.ex., le risque), sous forme de mesures comme les
changements moyens ou médians ou encore sous
forme de courbe de survie.
• L’ampleur de la taille des résultats et en quoi cela est
significatif.
• Comment vous résumeriez les résultats nets de cet
essai, en une seule phrase.
9. Dans quelle mesure les résultats sont-ils
précis?
Inscrire vos commentaires
Examinez si :
• Les résultats sont assez précis pour qu’une décision soit
prise.
• On a rapporté un intervalle de confiance. Votre décision
d’utiliser ou non cette intervention serait-elle la même à
la limite supérieure de l’intervalle de confiance qu’à la
limite inférieure de l’intervalle de confiance?
• On a rapporté une valeur p, là où les intervalles de
confiance ne sont pas disponibles?
Dix questions pour mieux comprendre les essais contrôlés randomisés
4
10.Est-ce que toutes les issues d’importance
ont été examinées, de sorte à ce que l’on
puisse appliquer les résultats?
Oui
Ne peut déterminer
Non
Examinez si :
• Les personnes incluses à l’essai sont différentes de
votre population de manières qui entraîneraient des
résultats différents.
• Votre environnement, sur le plan local, diffère largement
de celui qui entourait l’essai.
• Vous êtes en mesure d’offrir le même traitement au sein
de votre environnement.
Examinez les issues du point de vue :
• De l’individu
• Des responsables des politiques et des professionnels
• De la famille/des pourvoyeurs de soins
• De la communauté dans son ensemble
Examinez si :
• Tout effet bénéfique rapporté prend le dessus sur les
effets préjudiciables et/ou les coûts. Si de tels
renseignements ne sont pas fournis, peuvent-ils être
obtenus d’autres sources?
• Les preuves que comporte cet essai devraient
engendrer des modifications aux politiques ou aux
pratiques.
Dix questions pour mieux comprendre les essais contrôlés randomisés
5