CJA
HOME HELP FEEDBACK SUBSCRIPTIONS ARCHIVE SEARCH TABLE OF CONTENTS
This Article
Right arrow Abstract Freely available
Right arrow Full Text
Right arrow Full Text (PDF)
Right arrow Additional Material
Right arrow Submit a scholarly reply
Right arrow Alert me when this article is cited
Right arrow Alert me when eLetters are posted
Right arrow Alert me if a correction is posted
Services
Right arrow Related articles in CJA
Right arrow Similar articles in this journal
Right arrow Similar articles in PubMed
Right arrow Alert me to new issues of the journal
Right arrow Download to citation manager
Right arrow reprints & permissions
Citing Articles
Right arrow Citing Articles via HighWire
Right arrow Citing Articles via Google Scholar
Google Scholar
Right arrow Articles by Jacobsohn, E.
Right arrow Search for Related Content
PubMed
Right arrow PubMed Citation
Right arrow Articles by Jacobsohn, E.
Canadian Journal of Anesthesia 53:659-668 (2006)
© Canadian Anesthesiologists' Society, 2006
General Anesthesia

Poor inter-rater reliability on mock anesthesia oral examinations

[Le pauvre coefficient d’objectivité d’examens oraux en anesthésie simulés]

Eric Jacobsohn, MBCHB MHPE FRCPC*, P. Alan Klock, MD{dagger}, Michael Avidan, MBBCH* the Oral Examinations Group{ddagger}

* From the Departments of Anesthesiology and Surgery, Washington University School of Medicine, St. Louis, MO; and the
{dagger} Anesthesia and Critical Care, University of Chicago, Chicago, Illinois, USA;
{ddagger} (see Appendix II).

Address correspondence to: Dr. Eric Jacobsohn, Department of Anesthesiology, Washington University School of Medicine, 660 S. Euclid, MC 8054, St. Louis, MO 63110, USA. Phone: 314-747-4155; Fax: 314-362-4551; E-mail: jacobsoe{at}msnotes.wustl.edu

Objectif : Le coefficient d’objectivité (CO) et les habiletés de communication sont deux facteurs importants qui modifient les scores de l’examen oral. Notre étude voulait tester : 1) le CO d’un groupe d’examinateurs de l’American Board of Anesthesiology (ABA) et du Collège royal des médecins et chirurgiens du Canada (CRMCC) qui travaillent en isolement complet ; 2) l’effet de l’enseignement de techniques d’examen aux résidents.

Méthode : L’essai randomisé comportait un prétest et un post-test. Vingtcinq résidents ont passé un premier examen oral (E1) comme celui de l’ABA. Puis, ils ont été répartis en un groupe de formation courante, et un groupe d’intervention à qui on a présenté des techniques d’examen oral. Six semaines plus tard, ils ont passé un autre examen (E2). Les examens enregistrés sur bande vidéo ont été cotés ensuite par six examinateurs expérimentés du CRMCC et de l’ABA.

Résultats : Le CO était très pauvre à l’E1 (Kappa pondéré = 0,166, coefficient de corrélation intraclasse de 0,243) et s’est amélioré légèrement à l’E2 (Kappa pondéré = 0,275, P = NS ; le coefficient de corrélation intraclasse = 0,405, P < 0,01). Le taux de réussite pour les paires d’examinateurs a augmenté de E1 à E2 (15 % vs 43 %, P = 0,01). Cette amélioration est survenue dans les deux groupes, de formation courante et d’intervention. Il n’y avait pas de différence significative entre les examinateurs du CRMCC et de l’ABA. L’enseignement de techniques d’examen n’a pas amélioré en soi la performance, ce qui a pu être limitée par le pauvre CO. La pratique d’examens oraux semble bien améliorer la performance aux examens ultérieurs.

Conclusion : Le coefficient d’objectivité peut être pauvre quand les examinateurs cotent un examen oral en isolement complet. L’enseignement de technique de communication et la présentation d’examen oral aux candidats ne semblent pas améliorer la performance. Mais la pratique d’examen oral pourrait avoir de la valeur dans la formation aux futurs examens.


Related articles in CJA:

The oral examination process – gold standard or fool’s gold/Le processus d’examen oral - un vrai ou un faux étalon-or ?
Patricia Houston, Ramona A. Kearney, and Georges Savoldelli
CJA 2006 53: 639-642. [Full Text]  



This article has been cited by other articles:


Home page
 Canadian J. AnesthesiaHome page
S. C. Hall
Poor inter-rater reliability on mock anesthesia oral examinations
Can J Anesth, December 1, 2006; 53(12): 1268 - 1269.
[Full Text] [PDF]

Home page
 Canadian J. AnesthesiaHome page
P. Houston, R. A. Kearney, and G. Savoldelli
The oral examination process - gold standard or fool's gold/Le processus d'examen oral - un vrai ou un faux etalon-or ?
Can J Anesth, July 1, 2006; 53(7): 639 - 642.
[Full Text] [PDF]

This Article
Right arrow Abstract Freely available
Right arrow Full Text
Right arrow Full Text (PDF)
Right arrow Additional Material
Right arrow Submit a scholarly reply
Right arrow Alert me when this article is cited
Right arrow Alert me when eLetters are posted
Right arrow Alert me if a correction is posted
Services
Right arrow Related articles in CJA
Right arrow Similar articles in this journal
Right arrow Similar articles in PubMed
Right arrow Alert me to new issues of the journal
Right arrow Download to citation manager
Right arrow reprints & permissions
Citing Articles
Right arrow Citing Articles via HighWire
Right arrow Citing Articles via Google Scholar
Google Scholar
Right arrow Articles by Jacobsohn, E.
Right arrow Search for Related Content
PubMed
Right arrow PubMed Citation
Right arrow Articles by Jacobsohn, E.

HOME HELP FEEDBACK SUBSCRIPTIONS ARCHIVE SEARCH TABLE OF CONTENTS
Copyright © 2006 by the Canadian Anesthesiologists' Society.