Transcript 5166-17-epreuves-en-ccf-eval-par-competences-jpdelorme.pptx

BTS MAINTENANCE DES SYSTÈMES
Séminaire national BTS Maintenance des Systèmes – Lycée Raspail Paris
13 et 14 novembre 2014
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
1
BTS MAINTENANCE DES SYSTÈMES
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
2
BTS MAINTENANCE DES SYSTÈMES
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
3
BTS MAINTENANCE DES SYSTÈMES
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
4
BTS MAINTENANCE DES SYSTÈMES
Epreuves professionnelles en CCF
E5 – Activités de
maintenance
Unité
Sous-épreuve E51 :
Maintenance corrective d’un U51
bien
Sous-épreuve E52 :
Organisation de la
U52
maintenance
Sous-épreuve E53 :
Conduite d’une installation /
U53
Amélioration-intégration
d’un bien
Systèmes de
production
Systèmes
énergétiques et
fluidiques
Systèmes éoliens
3
CCF
2 situations
2
CCF
1 situation
2
CCF
1 situation
3
CCF
1 situation
2
CCF
1 situation
2
CCF
1 situation
2
CCF
1 situation
2
CCF
1 situation
Remarque : Pas d’épreuve E53 pour les options SP SE – Cette épreuve valide les deux
compétences suivantes pour l’option Systèmes énergétiques et fluidiques.
 Cette épreuve est une épreuve orale sur système;
 Elle se déroule au cours de la deuxième année de formation;
 L’équipe enseignante doit constituer un dossier pour chaque candidat;
 Les deux compétences visées sont : C 61  Assurer la mise en service et l’arrêt
C 62 
Réaliser la conduite
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
5
BTS MAINTENANCE DES SYSTÈMES
Epreuves professionnelles en CCF
Sous-épreuve E51 : Maintenance corrective d’un bien
 Intervention de maintenance corrective sur un système pluri technologique en
panne pour valider les compétence suivantes :
C11
Diagnostiquer les pannes
C12
Réparer, dépanner et éventuellement remettre en service
C15*
Identifier les risques pour les personnes ou l’environnement, définir et respecter les
mesures de prévention adaptées (Non évaluée pour l’option Syst. Éoliens)
Sous-épreuve U51 en CCF pour l’option Systèmes de production - coefficient : 3
- Première situation d’évaluation en CCF : diagnostic, durée : 3 heures maximum ;
- Deuxième situation d’évaluation en CCF : réparation ou dépannage, remise en
service : durée : 3 heures maximum.
La compétence C15 sera évaluée au cours des deux situations d’évaluation.
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
6
BTS MAINTENANCE DES SYSTÈMES
Epreuves professionnelles en CCF
Sous épreuve E51
Pour l’option Systèmes énergétiques et fluidiques - coefficient : 2
• Une situation d’évaluation en CCF : diagnostic, réparation, dépannage, remise en
service : durée : 6 heures maximum.
• La compétence C15 sera évaluée au cours de la situation d’évaluation.
Pour l’option Systèmes éoliens - coefficient : 2
• Une situation d’évaluation en CCF : diagnostic, réparation, dépannage, remise en
service : durée : 6 heures maximum.
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
7
BTS MAINTENANCE DES SYSTÈMES
Epreuves professionnelles en CCF
Sous épreuve E52
Remarque :
Coefficient 2 pour les options Systèmes énergétiques et fluidiques et éoliens
Coefficient 3 pour l’option systèmes de production
E53 est une sous-épreuve écrite avec outil informatique à disposition. Elle permet
de réaliser une étude de cas à partir d’un dossier technique présentant une
problématique de maintenance. Cette épreuve permet de valider les compétence
suivantes:
C 21
C 31
C 32
Analyser la fiabilité, la maintenabilité et la sécurité
Organiser la stratégie et la logistique de maintenance
Préparer les interventions de maintenance corrective et préventive
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
8
BTS MAINTENANCE DES SYSTÈMES
Les Principes du CCF
• L’enseignant forme et évalue ses propres élèves et étudiants ;
• L’enseignant définit la situation d’évaluation qu’il va retenir pour
certifier ;
• L’évaluation fait partie de la formation et est donc à prévoir dans la
progression pédagogique.
Sans organisation pédagogique …
PAS de CCF possible !...
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
9
BTS MAINTENANCE DES SYSTÈMES
Les Principes du CCF

Le CCF constitue une évaluation certificative (et non pas
formative) d’un niveau terminal, par sondage de compétences,
au fur et à mesure que les formés atteignent le niveau requis ;

L’évaluation CCF s’appuie sur la notion de situation d’évaluation
(réalisation d’une activité faisant partie de la progression
pédagogique dans un contexte donné).

Le CCF n’est pas l’évaluation d’une compétence et encore moins
d’une ou plusieurs connaissances prisent isolément.

Les compétences sont évaluées une fois et une seule.

Le CCF suppose une approche globale de l’évaluation.
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
10
BTS MAINTENANCE DES SYSTÈMES
Les Principes du CCF
Le CCF se distingue du contrôle continu par :
 une vérification de compétences terminales ;
 La notion de situations d'évaluations comme support de la
certification.
Le CCF se distingue de l'évaluation ponctuelle par :
 une évaluation conduite par le formateur ;
 une répartition dans le temps de formation.
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
11
BTS MAINTENANCE DES SYSTÈMES
Les situations d’évaluation
Les situations d'évaluation sont :
Des situations d’apprentissage réelles, simulées ou construites
proposant à l’élève la réalisation d'une activité dans un contexte
donné et qui permettent la vérification des compétences acquises.
Elles sont définies à partir des éléments suivants :
• les compétences à évaluer ;
• les conditions de l’évaluation ;
• le support retenu, c’est à dire l’activité à réaliser et ses conditions
de réalisation ;
• les critères et les indicateurs d’évaluation.
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
12
BTS MAINTENANCE DES SYSTÈMES
Construire un situation d’évaluation

Repérer les tâches professionnelles correspondant à la situation
d’évaluation concernée (définition des épreuves) ;

Effectuer un choix d’activités caractéristiques (compatibles avec
le processus de formation, au temps imparti, aux équipements
et matériels disponibles) ;

Identifier les compétences du référentiel associées aux
compétences terminales à évaluer.
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
13
BTS MAINTENANCE DES SYSTÈMES
Construire un situation d’évaluation

Contextualiser les données et les indicateurs de performance
(voir indicateurs et niveaux d’exigence dans le référentiel) ;

Choisir l’activité pédagogique (mise en situation) de la
progression la plus proche de ce scénario ;

Prévenir le ou les étudiants qui vont être évalués ce jour.
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
14
BTS MAINTENANCE DES SYSTÈMES
La fiche d’évaluation

Récapitule les caractéristiques de la situation d’évaluation ;

Permet une correction harmonisée ;

Mémorise les résultats de l’évaluation ;

Sert de document d’appui au jury.

L’ensemble des résultats obtenus par le candidat, lors des
différentes évaluations, donne lieu à une proposition de note
globale pour l’unité correspondante.

Seul le jury final a compétence pour arrêter la note.
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
15
BTS MAINTENANCE DES SYSTÈMES
L’harmonisation

Le contrôle du CCF se fait à la fois au niveau de l’établissement
(pour les élèves de l’établissement) et au niveau du jury (pour
l’ensemble des candidats);

En début de formation, l’inspecteur responsable de l ’examen
statue sur le cadrage général du CCF et le communique à
l’ensemble des acteurs concernés (méthodologie, activités,
planification, fiches d’évaluation)

Parallèlement, des instructions sont données aux auteurs des
sujets pour que les épreuves ponctuelles (concernant les
candidats libres) s’inscrivent dans le même cadrage.
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
16
BTS MAINTENANCE DES SYSTÈMES
Recommandations

veiller à l’organisation administrative du processus ;

veiller à ne pas interrompre la formation ;

intégrer le CCF dans le processus de formation ;

ne pas rechercher l’exhaustivité dans la certification ;

respecter les rythmes d’acquisition des compétences des élèves
et les fourchettes de dates conforme au référentiel
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
17
BTS MAINTENANCE DES SYSTÈMES
L’évaluation par compétences
•
« La compétence est la prise d’initiative et de responsabilité de
l’individu sur des situations professionnelles auxquelles il est
confronté ». Philippe ZANIFIAN
• Selon le CEREQ « Ensemble de savoirs, savoir-faire et savoir-être qui sont mobilisés
dans l’exercice d’un emploi/métier, dans une situation donnée »;
• Selon l’AFNOR « Mise en œuvre, en situation professionnelle, de capacités qui
permettent d’exercer convenablement une fonction ou une activité »;
• Selon le MEDEF « Combinaison de connaissances, savoir-faire, expériences et
comportements, s’exerçant dans un contexte précis. Elle se constate lors de sa
mise en œuvre en situation professionnelle à partir de laquelle elle est validable.
C’est donc à l’entreprise qu’il appartient de la repérer, de l’évaluer, de la valider
et de la faire évoluer ».
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
18
BTS MAINTENANCE DES SYSTÈMES
L’évaluation par compétences
• « Si l’école savait vraiment évaluer des connaissances utilisables
hors de leur contexte d’acquisition, elle n’aurait aucune peine à
évaluer des compétences ». Philippe PERRENOUD
Le sociologue conclut:
 Ce n’est pas un problème nouveau, cela oblige à remettre sur le
métier la question de l’évaluation des connaissances.
 Cela passe par une formation et une expertise plus pointues des
enseignants/évaluateurs inséparable d’une formation à travailler
par situation
 Qu’il faut faire confiance au jugement de l’expert donc sortir de la
suspicion qui ronge l’évaluation scolaire.
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
19
BTS MAINTENANCE DES SYSTÈMES
L’évaluation par compétences
Attention au sens des mots et à la confusion entre
capacités et compétences:
• Une capacité est globale et non évaluable, c’est un ensemble de
compétences;
• Une tâche est précise et évaluable dans un contexte de travail;
• Une compétence est large et évaluable dans un contexte
professionnel donné (c’est un ensemble de tâches).
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
20
BTS MAINTENANCE DES SYSTÈMES
L’intégration des savoirs et des compétences
Savoirs
Savoir-faire
Savoir être
Cognitif
Psychomoteur
Socio-affectif
• 3 types d’activités du savoir :
reproduire (littéral et transposé),
faire (appropriation) et être
(manières de réagir et d’agir
habituelles)…
• 3 domaines du savoir : cognitif
(activités mentales), psychomoteur
(activités gestuelles) et socioaffectif (valeurs, attitudes)… jamais
exclusives mais avec des
dominantes.
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
21
BTS MAINTENANCE DES SYSTÈMES
L’intégration des savoirs et des compétences
Complexité
Etendue
Opérationnalité
Les compétences sont toujours associées à des savoirs, mais savoirs et
compétences évoluent toute au long de la vie et ne s’acquièrent que
progressivement.
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
22
BTS MAINTENANCE DES SYSTÈMES
Elaboration des sujets
Référentiel d'activités professionnelles
Acitivité 1
Référentiel de certification
Tâche 1.1
Sous-épreuve E22
Compétence 1.3 ETC...
Tâche 1.9
Question 2
Poids des compétences et questions
30 %
6/20
50 %
3/20
Pondération de la compétence 1.1
Poids de la question
50 + 50 =
100% des 30%
Question 6
Tâche 1.14
Compétence 2.1 ETC...
Acitivité 2 ETC...
Tâche 2.3
Question 3
50 %
3/20
50 %
10/20
70 %
7/20
Poids de la question
Pondération de la compétence 2.1
Poids de la question
70 + 30 =
100% des 50%
Tâche 2.6 Etc...
Acitivité 4
Tâche 4.2
Question 4
Compétence N ETC...
Question 1
Question 5
30 %
3/20
20 %
4/20
25 %
1/20
75 %
3/20
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
Poids de la question
Pondération de la compétence N
Poids de la
question
Poids de la
question
20 + 80 =
100% des 20%
23
BTS MAINTENANCE DES SYSTÈMES
Exemple de grille d’évaluation
NT
0
33%
66%
100%
30 %
3/20
3/20
✘
✘
Réponse moyenne
bas = 33% du poids
de la note
50 %
3/20
7/20
✘
✘
Réponse moyenne
haut = 66 % du
poids de la note
20 %
✘
1/20
3/20
Indicateur de
question non
traitée
Réponse très
insuffisante = 0 %
du poids de la note
✘
Réponse complète
= 100% du poids de
la note
24
BTS MAINTENANCE DES SYSTÈMES
Harmonisation
Compilation de
toutes les grilles
individuelles
• Tableau Excel rassemblant les
niveaux de réponse à toutes les
questions par candidat
Classement des
taux de réponse
aux questions
• Classement des indicateurs,
des moins bien traités aux très
bien traités
Possibilités
d’annuler des
questions au
niveau
académique
• Annulation
automatique des
indicateurs non
traitées par tous les
candidats
• Possibilité d’annuler
les indicateurs les
moins bien traitées
(limite de -15%)
BTS MAINTENANCE DES SYSTÈMES
Ajustement académique des notes
Sujet
X
0
33
%
66
%
100
%
Exemple traité: Poids atteint
0 + 3x0,33 + 7x0,66 + 4 = 9,6
9,6 x 1,17 = 11,2 soit 11,5 au lieu de 10
30 %
Question 2
3/20
Question 6
3/20
✘
Non traité=> poids de 15%, soit 3pts
✘
50 %
Question 3
3/20
Question 4
7/20
✘
✘
20 %
Question 1
1/20
✘
Question 5
3/20
✘
L’annulation de
la question 2
pèse 3 pts.
Les candidats
sont notés sur 17
pts.
Il faut multiplier
chaque question
par 1,17 pour
ajuster le
barème sur 20
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
BTS MAINTENANCE DES SYSTÈMES
Cas des candidats ayant répondu à la question annulée
Sujet
x
0
33
%
66
%
100
%
30 %
Question 2
3/20
Question 6
3/20
✘
Question annulée mais
abordée par un candidat
✘
Le candidat ayant répondu ne
doit pas être pénalisé.
50 %
Question 3
3/20
Question 4
7/20
Exemple traité: Poids atteint
0+ 0,33x3 + (7+3)x0,66 + 4 = 11,65
11,65 x 1,17 => 13,6 / 20
soit 14/20 au lieu de 11,5
✘
On calcule sa note avec la
correction majorée de 15% et
on y ajoute la note de la
question annulée.
✘
20 %
Question 1
1/20
✘
Question 5
3/20
✘
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
BTS MAINTENANCE DES SYSTÈMES
Avantage du processus d’harmonisation
• Permet d’éliminer les questions auxquelles aucun élève n’a
répondu… ce qui, sur un grand nombre est significatif d’un défaut
du sujet.
• Permet d’accorder un « bonus » aux élèves ayant répondu
correctement aux questions annulées.
• Permet d’identifier les questions et les compétences non traitées
et mal maîtrisées par les candidats, rendant possible des actions
pédagogiques correctives pour les sessions suivantes.
• Permet de garder une bonne étendue des notes.
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
28
BTS MAINTENANCE DES SYSTÈMES
Séminaire national BTS Maintenance des Systèmes – Lycée Raspail Paris
13 et 14 novembre 2014
Jean-Pierre COLLIGNON IGEN – Jean-Pierre DELORME IA-IPR
29