Les grilles d

1
Faculté de médecine Bureau dévaluation Docimologi
e appliquée aux sciences de la santé
Grillesdobservation
Atelier
Serge Normand, M.A. Docimologue
2
Évaluer la compétence clinique ?
3
Clinical professional competence
The ability to gather data from the patient by
history and physical examination, integrate this
information into a diagnostic formulation, select
appropriate investigations to confirm the
diagnosis, and institute efficacious management (
Norman 1981 )
The habitual and judicious use of communication,
knowledge, technical skills, clinical reasoning,
emotions, values, and reflection in daily
practice for the benefit of the individual and
community being served ( Epstein and Hundert 2002
)
4
Defining and Assessing Professional Competence A
Framework for Assessment
Epstein, RM and EM Hundert, Defining and
Assessing Professional Competence, JAMA, Vol 287,
No 2, 2002
5
Évaluer la compétence clinique ?

• Observations
• Examens oraux
• QCM

• Patientsstandardisés
• ECOS, CPX

75 préclinique 63 clinique LCME 2004
6
Évaluer la compétence clinique
Epstein, RM and EM Hundert, Defining and
Assessing Professional Competence,JAMA, Vol 287,
No 2, 2002
7
Grille dévaluation

1. Critères
2. Niveaux qualitatifs( échelle descriptive )
3. Stratégie de notation

• Geste technique
• Attitude
• Entrevue
• Examen physique
• Etc.

8
Observation directe
Liste de vérification ( Checklist )
Grille dévaluation ( Rating Form )

• Fait / non fait
• Présent / absent
• Adéquat / inadéquat
• Satisfaisant / non satisfaisant
• Etc.

• Performance supérieure
• Réussite certaine
• Réussite limite
• Échec limite
• Échec certain

9
Observation directe

• Fait / non fait
• Présent / absent
• Adéquat / inadéquat
• Satisfaisant / non satisfaisant
• Etc.

Liste de vérification ( Checklist )

• Observation  dichotomique 
• Adaptée au contexte
• 10 30 items
• Pondération
• Niveau du candidat

Whelan and al., Medical Teacher 2005 3 Huber
and al. Medical Education 2005 39 Kogan and
al., Teaching and Learning in Medicine 2005
17(2) Gorter and al, Academic Medicine 2000
75(11)
10
Grille dévaluation
Critère coopération ( échange des idées )
Échelle uniforme Excellente Satisfaisante Insatisfaisante
Échelle descriptive Donne ses idées et accepte celle des autres Donne ses idées ou accepte celles des autres Ne donne pas didée et naccepte pas celles des autres
SCALLON, Gérard, Lévaluation des apprentissages
dans une approche par compétences, Édition du
renouveau pédagogique, 2004
11
Grille dévaluation
Élaboration de la grille Un travail déquipe !
12
Grille dévaluation
Échelle descriptive Ou Échelle uniforme
Favorise la rétroaction Mieux adaptéeau
candidat  expert 
13
Établir des normes de réussite Setting
Performance Standards
Niveau acceptable
C o m p é t e n c e s
14
Déterminer la note de passage
15
( selon la méthode Borderline Group )
Déterminer la note de passage - ECOS
Grille
Moyennes des scores par examinateurs
1. Hs shjs sjnhss sjhs sjs sj 2. Ksks
sksmsiqopql qlqmq q q qkl 3. Lalka kdm ddkk
dlkl dlld 4. Keyw dd e r rrmt tmk 5. Jfjfk
dd 6. Hskls skj sls ska ak akl ald 7.
Hdhhddh shs ahhakk as TOTAL
?
?
?
?
1 Échec 2 Limite insuffisant 3 Limite
suffisant 4 Attendu 5 Excellent
?
Éval. Globale 1 2 3 4 5
16
( selon la méthode Borderline Group )
Déterminer la note de passage - ECOS
17
( selon la méthode Borderline Group )
Déterminer la note de passage
18
Déterminer la note de passage( selon la méthode
de Ebel )
Situez chaque question ou élément de questions
qui composent lexamen dans les cellules de cette
grille par exemple, une questions de 3 points
comportera 3 entrées dans la grille. Dans chaque
cellule, une proportion de questions quun
candidat à compétence acceptable devrait réussir
est proposée. Pour chaque cellule, multipliez le
nombre de questions (ou déléments) par le
pourcentage correspondant et faites ensuite la
somme de ces produits. La valeur obtenue divisée
par le nombre total de questions (ou déléments)
constitue le seuil acceptable de performance pour
cet examen exprimé en pourcentage.
19
Déterminer la note de passage( selon la méthode
de Ebel )
Nombre de questions 72 SAP 61
20
Déterminer la note de passage( selon la méthode
 Direct Borderline  )
Question 1 oui non
Question 2 oui non
Exemple Nombre de questions 25 Nombre de OUI
16 SAP 64
Question 3 oui non
Question oui non
Question oui non
Question 25 oui non
Indiquez pour chaque question si un candidat à
compétence acceptable devrait répondre
correctement à la question. Le nombre total de
 OUI  divisé par le nombre total de questions
constitue le seuil acceptable de performance pour
cet examen exprimé en pourcentage.
21
Déterminer la note de passage( selon la méthode
Hofstee )