Présentation pré-étude sur l'usage des TCS pour la formation/évaluation des compétences du C2i niveau 2 métiers de l'ingénieur.

1. 1 Tests de Concordance de Script et C2i2mi Projet

2. Les tests de Concordance de Scripts Principe 2

3. Origine des TCS Introduction en médecine Université de Sherbrooke (Charlet 1998) Introduction en informatique Ecole Centrale de Nantes (Magnin2010) http://eat-tice.ec-nantes.fr 15/12/2010 3

4. Principe Scénario Question Enoncé d’un cas Hypothèse Élément nouveau Réponse Impact sur l’hypothèse : +2, +1, 0, -1, -2 Renforce fortement l’hypothèse Renforce Correction Adéquation aux réponses des experts 15/12/2010 4

5. Prérequis Rédaction des questions Solliciter la compétence sous une forme d’une expertise issu d’un raisonnement en environnement incertain : TCS ≠ QCM Historiquement, le TCS doit rendre compte de cas réels S’appuyer sur des expériences réelles, et donc des experts Expertise des questions Disposer d’experts (non contextuels) 15/12/2010 5

6. Types d’expertises évaluées 16/12/2010 6 Source : Demeester 2004

7. Création Méthodologie dans le contexte du C2i 2mi 15/12/2010 7

8. Méthodologie de création Grille de lecture Pour chaque compétence, identifier des questions issues si possible de cas réels Brainstorming Rédaction Validation Expertise 15/12/2010 8 Enseignants + Experts métiers Experts métiers (+ nombreux)

9. Exemples D2 D2-1 : Maîtriser les processus d'une politique de sécurité pour participer à sa mise en place Comprendre le rôle du document de définition de PSSI Connaître les caractéristiques attendues d’un système d’information, en termes de sécurité : confidentialité, disponibilité, intégrité, non répudiation Connaître l’existence de méthodes de mise en place d’une PSSI Adapter ses comportements et ceux de son équipe en conformité avec la PSSI, dans son secteur d’activité 15/12/2010 9

10. Caractéristiques de sécurité du SI : confidentialité, disponibilité, intégrité, non répudiation Scénario : L’entreprise dans laquelle vous travaillez veut mettre en place une PSSI. Elle procède donc à une évaluation des risques et liste les points à respecter. Vous faites partie de l’équipe. Le secteur d’activité est en permanence en flux tendu et implique la manipulation de nombreuses informations documentaires. Hypothèse : Les risques liés à la sécurité sont liés à 80% à la disponibilité des documents. Elément Nouveau : Vous travaillez dans un cabinet de notaires. 15/12/2010 10

12. Constats Quelles sont les compétences sollicitées ? Un changement léger des hypothèses, peut changer les compétences sollicitées. Deux déclinaisons peuvent solliciter des compétences différentes Une même déclinaison peut solliciter plusieurs compétences La fabrication des questions est issue D’expertises réalisées par certains enseignants De retours d’expérience de la DCRI Les cas proposés sont souvent fortement contextualisés 16/12/2010 14

13. Un point essentiel Solliciter des experts pour la constitution des questions, et leur évaluation DCRI CLUSIF Industriels … 16/12/2010 15

14. Outils Quelle(s) plateforme(s) 15/12/2010 16

15. Outil spécifique ou générique ? Constat TCS ≠ QCM Mais Modélisation question : idem QCM Réponse de l’expert : idem QCM + commentaire Réponse du candidat : idem QCM + commentaire Correction : spécifique 16/12/2010 17

16. Exemple d’intégration sous Claroline à l’ISARA 16/12/2010 18

17. Correction 16/12/2010 19

18. Correction 16/12/2010 20

19. Conclusion Il est possible de : Adapter des outils QCM existant Claroline Outil du C2i1 … Etendre QTI, pour proposer un format de représentation des TCS Export/import de TCS ! 16/12/2010 21

20. 22 Merci de votre attention Christophe MATHIEU christophe.mathieu@ecam.fr Jean Marc FERRERO Jean-marc.ferrero@isara.fr