Home

Yasmina CHAPUIS

1. Yasmina Chapuis A 45 Annexes 14 Premier rappel aux tudiants De evaluations hepl ch Objet 1er Rappel valuation Date 14 d cembre 2010 16 28 57 GMT 01 00 yasmina chapuis hepl ch R pondre evaluations hepl ch Ch res tudiantes chers tudiants Je me permets de vous rappeler que le d lai de retour des r ponses au questionnaire pour l valuation du module est fix ce jeudi 23 d cembre 2010 et qu il est tr s important que vous y r pondiez pour le bon d roulement de cett de test Voici le lien vers le questionnaire http www surveymonkey com Ce lien unique est rattach ce sondage et votre adresse e mail Veuillez donc ne pas transf rer ce message En vous remerciant pour votre collaboration et avec mes cordiales salutations et mes meilleurs voeux pour de belles f tes de fin d ann e Yasmina Chapuis Yasmina Chapuis Stagiaire MPC Unit Qualit C33 319 yasmina chapuis hepLlch Direct 41 21 316 06 85 Haute cole p dagogique Avenue de Cour 33 1014 Lausanne www hepl ch t envoy par erreur et que vous ne participez pas l valuation du module BP101 veuillez cliquer sur le ben ci dessous Yasmina Chapuis A 46 Annexes 15 Deuxi me rappel aux tudiants De evaluations hepl ch Objet 2e Rappel valuation Date 14 d cembre 2010 16 29 34 GMT 01 00 yasmina chapuis hepl ch R pondre evaluations hepl ch Ch res tudiantes chers
2. Exigences LAU CUS LHES enseignant d am liorer des cours Avoir un bilan des forces et faiblesses ne EPFL autres pays H l ne R f rences de Fee Poissant Guide D velopper et mettre en valeur la qualit une exigence partag e Document Evaluation des cours Pr sentation de la d marche Document charte Tous les modules de AU moins 1 cours par ann e et par enseignants P riodicit en fin de module Obligatoire Obligatoire Am liorer la qualit son cours Mettre en valeur les pratiques stimulantes n des cours Poss der un indicateur AE Recueillir l avis des global a participants aux Analyser les besoins en cours formation Service de recherche et d veloppement Zollikofen l ann e doivent tre valu s R guler l enseignement Guider le d veloppement professionnel des enseignants Am liorer l enseignement EPFL CEFRES E W Brascamp H l ne Poissant Huguette Bernier Universit s HES SO Guide pratique l usage des tudiants HES Directives Manuel qualit Bachelor au moins 1 cours tous les 3 ans Master au moins 1 cours tous les 2 ans En principe tous les modules doivent tre valu s chaque semestre Obligatoire pour la formation de base et Volontaire Volontaire pour les autres formations Population Etudiants des cours Participants des modules Etudiants des modules Etudiants des cours Masse 150 cours par semest
3. faire ce questionnaire en ligne mals personnellement je pr f re la version papler car j alme bien voir la personne qui je dois retourner le questionnaire et m me si au besoin lui poser des questions Un argument pour la version papler peut tre la r ponse d ventuelles uestions est imm diate Le ait de rempli un questionnaire est la que a soit sur ligne ou sur papier donc pour moi c est gal cela est plus rapide et nous avons plus de temps pour y r pondre Quand c est sur papier on perd du temps en cours les Formateurs veulent qu on fasse cela le plus vite possible et nous pouvons donc pas r pondre comme nous voudrions pour mol cela revient au m me mais en ligne est naturellement plus ue pour le d pouillement Que se soit sur papier ou sur internet c est gal C est plus simple et a vite de perdre du temps pendant les cours Deja d un point de vue ecologique c est mieux et en plus a permet de le falre chez soi quand on en a envie Lorsque c est sur papier on le fait pendant un cours juste avant les examens ce qui n est pas l id al car tout le monde sait que les derniers cours avant les examens sont importants pour finir le contenu et repondre aux questions j imagine que c est plus simple pour retranscrire les r ponses 13 05 11 Resultats critiques xis votre avis y a t il d autres questions qui devraient figurer dans ce questionnaire afin que le module soit va
4. plusieurs id es fusent Pour les enseignants il faudrait des questions sur les liens entre les unit s sur les stages sur le changement de repr sentation du m tier d enseignant sur l apprentissage sur les sujets redondants ou manquants sur les th matiques abord es sur ce qu ils ont appris et retenu Il faudrait aussi des questions plus cibl es sur les contenus ou alors une indication dans le questionnaire qui pr cise le fait que l valuation porte sur le contenu et non sur la personnalit des enseignants Car de nombreux tudiants dans les questions ouvertes associent le cours avec l enseignant or ce n est pas ce qui est demand dans cette valuation Un enseignant a aussi pens qu il serait bien d ajouter apr s les commentaires sur le module une proposition de rencontre d un des formateurs par rapport aux commentaires que les tudiants apportent Cette rencontre servirait mieux comprendre les commentaires des tudiants En dernier lieu globalement tous les formateurs trouvent la mise en page claire confortable agr able conviviale et ad quate C est facile suivre et naviguer On voit bien la diff rence entre les questions gr ce aux ombrages La progression en bas de page est agr able Les questions sont assez claires et c est bien que les tudiants soient oblig s de r pondre chaque question pour passer la page suivante Pour un formateur il manque cependant un peu de vivacit dans les couleur
5. saisissez le texte pour chaque col nne sur une ligne s par e Kon Plut t non Plut t oui Oui Sans avis ins rer une r ponse de Trier rendre al atoire ou modifier l ordre des rang es Facultati Sp cihez un ordre fe ou van abl pour vos choix de r ponse Ne permettre qu une seule r ponse par colonne Facntatif Cela s appelle galement Classement forc J Exiger une r ponse pour cette question Faculatif La personne interrog e doit r pondre tout lignes Si aucune r ponse n est fournis la question afficher ce message d erreur Les 7 questions doivent tre crites dans choix de rang es la ligne Et dans choix des colonnes il faut noter les 5 points de l chelle La question ressemblera cela Yasmina Chapuis A 30 Annexes Objectifs et contenu du module Non Plut t non Plut t oui Oui Sans avis 1 Les objectifs du module sont bien d finis dans les documents pr sent s J J G 2 Les contenus du module permettent d atteindre les objectifs comp tences annonc e s 7 3 I J 3 3 Vous disposez des connaissances pr alables pour suivre ce module avec profit J j J J y 4 L articulation des unit s du module est pertinente 4 y 9 J p 5 Les m thodes p dagogiques employ es dans ce module vous ont permis de r aliser des apprentissages satisfaisants d id J 6 Vous comprenez bien l importance de ce module pour votre formation J J s p y 7 Vous savez de q
6. valuation doit tre effectu e dans le semestre durant lequel le module est nouveau propos Si cette deuxi me valuation n est toujours pas concluante des mesures diff rentes doivent tre prise Au cas o cette difficult concerne l organisation g n rale du module un autre niveau d valuation est envisag avec la commission des plans d tudes Cependant si cela concerne des aspects internes au module les formateurs doivent mettre en uvre un projet de rem dliation en collaboration avec la conseill re la formation Sur la base des r sultats et du canevas chaque responsable de modules et leurs formateurs doivent crire un rapport d auto valuation destin la Direction de la formation Une revue de direction est organis e pour analyser la synth se des r sultats et les rapports d auto valuation des formateurs et pour faire des propositions d am lioration de la qualit des enseignements L Unit Qualit transmet la Direction de la formation une synth se annuelle chiffr e des r sultats la fin de l ann e le directeur de la formation transmet un rapport global sur l valuation des enseignements au Comit de direction CD Ce travail abordera les tapes 1 12 Cf Termes et d finitions Cf Termes et d finitions Cf Annexe 3 Cf Termes et d finitions Yasmina Chapuis 15 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 3 2
7. 2 6 16 6 31 8 44 4 0 7 4 0 Globalement ce module vous apporte N 5 28 75 33 4 6 FSU 3 3 18 5 49 7 21 9 2 6 4 0 3 3 10 6 47 7 32 5 2 0 4 0 Q11 1 L unit BP101 1 m a beaucoup appris N 1 10 46 86 2 0 6 ST PSN SES EN ENS Q11 2 Vous appr ciez l unit BP101 1 N 2 Eu 55 80 1 0 m a ce Q11 3 L unit BP101 2 m a beaucoup appris DE Q11 4 Vous appr ciez l unit BP101 2 30 27 T oira posate a 20 100 zasu arza 13 om 40 Q11 5 L unit BP101 3 m a beaucoup appris N 10 25 65 43 2 0 6 PT s6 166 asom 285 13 oom 40 Q11 6 Vous appr ciez l unit BP101 3 N 14 23 62 43 3 0 6 ES poserte mP m osm asaw arin 285 20 oow aow Taux d l ves globalement satisfaits moy des taux plut t oui et oui Q8 et Q9 75 8 YC Eval test Eva_modulqE _10A xIs 1 1 Yasmina Chapuis A 52 Annexes 19 Graphiques de l valuation du module Document confidentiel 13 04 11 hep Haute cole p dagogique Qualit Avenue de Cour 33 CH 1014 Lausanne ww whe plch Le R ponses des tudiants aux questions 1 9 N 151 0 10 20 30 40 50 60 70 80 90 100 3 Les objectifs du module sont bien d finis dans les documents pr sent s o B g Les contenus du module permettent d atteindre les objectifs comp tences g annonc e s Ter d Vous disposez des connaissances pr alables pour suivre c
8. 8 Le module vous apporte une meilleure connaissance O O O O O du m tier 10_La quantit du travail personne est uate O O O 12 Les liens des unit s entre elles sont coh rents Ge 1011616 Remarque s I Yasmina Chapuis A Annexes Evaluation des modules Proposition de questionnaire Appr clation g n rale du module Plut t Plutot Oui Sans Non non oui avis 15 Globalement vous appr ciez ce module ee e Remarque s a Investissement lt th thou 2hou 3hou 4hou 5hou Sans lt h lt 3h lt h lt 6h lt 6h 2 avis Remarque s Questions suppl mentaires du responsable de module Yasmina Chapuis A 72 Annexes 3 Evaluation des unit s Unit 1 22 2 Vous appr ciez cette unit Bar 18 41 et Ce Remarque s 2 Unit 2 Pas Plut t Sans concem Non ays Plut t oui Oui avis par cette unit 22 4 Vous appr ciez cette unit do Se BUT 60 0 Remarque s A Unite 3 Pas Plut t Sans concem Lis non REA NOU avis par cette unit amp Ke 22 6 Vous appr ciez cette unit CRC ET TTC YOU D Remarque s al Ajouter le nombre d unit du module Yasmina Chapuis A 73 Annexes Evaluation des modules Proposition de questionnaire 4 Commentaires sur le module 12 Quels sont selon vous les points forts du module EE a z 13 Quels sont selon vous les aspects du module am llorer n El 14 Remarques pr cisions
9. Annexes Semestre 10A Commentaires Resultats critiques xls A l avenir vous pr f reriez votre avis y a t il d autres questions qui remplir le questionnaire en devraient figurer dans ce questionnaire afin ligne dans sa version que le module soit valu correctement Si papier c est gal sans avis Merci de preciser votre reponse oui lesquelles sur papier on peut crire des commentaires plus d taill s En ligne on ne peut pas crire dans les marges pour d finir clairement ce qui nous plu o non Cependant c est peut tre plus cologique de faire a en ligne Ce serait donc mieux de remplir ce questionnaire en ligne mais avec Une valuation des enseignants serait possibilit d crire dans les marges pertinente aus lors a Pour l aspect cologique differents cours de ce module Pia question plus sp cifique pour chaque unit En ligne C est plus facile est vite fait du module et non pas dans son ensemble tes vous satisfait de la fr quence des viter cette sur consomma tion de cours quels sont les modules les plus Je trouve mieux de le remplir en ligne plut t qu en version papler et de perdre du temps en cours De plus on peut prendre le temps qu on veux Est ce que les professeurs vous soutiennent pour r pondre aux questions on est dans votre travail Sont ils pr sents pour pas stress r pondre vos questions la version en ligne a de nombreux
10. Termes et d finitions Yasmina Chapuis A 20 Annexes Master tous les 2 ans Pour les autres formations l valuation des enseignements n est pas obligatoire Jusqu au semestre pass environ 750 unit s d enseignement taient valu es par semestre et les r ponses taient saisies la main Choix de l outil Depuis printemps 2011 l UNIGE est pass de l valuation papier un syst me informatis Elle a d but sa phase pilote en septembre 2010 En effet la version automatis permet une grande conomie de papier et de temps une baisse des ressources humaines de g n rer des indicateurs qualit d avancer dans la cr ation d une base de donn es institutionnelle une simplification de la saisie et une uniformisation des proc dures L outil utilis est EvaSys C est un programme de solution haut degr d automatisation pour l valuation des enseignements Il permet de cr er un questionnaire en ligne de faire un envoi automatique de plus de 1000 questionnaires en m me temps il permet d avoir un url unique pour chaque destinataire il g n re des rapports de r sultats individuels ou collectifs et il peut calculer des normes qualit I permet aussi une saisie automatique des r sultats par un scannage des questionnaires papier Cependant cette forme ne permet pas de retranscrire les commentaires manuscrits des tudiants Contenu du questionnaire II existe un questionnaire type par facult et par cours s
11. ce qui quivaut une charge suppl mentaire Il faut que quelqu un introduise l valuation de vive voix car les tudiants ont besoin de mettre une t te sur le questionnaire Finalement il ny a pas de possibilit d interaction sur une formulation mal comprise et on peut s y soustraire facilement Pour conclure les formateurs m ont fait diff rentes remarques Un des formateurs se pose la question de pourquoi est ce que 50 tudiants n ont pas r pondu au questionnaire I trouve qu il serait int ressant de leur envoyer un mail pour savoir pourquoi ils ne l ont pas fait Un autre trouve qu il serait int ressant qu il y ait une campagne publicitaire d valuation qui serait pr sente dans tout le b timent comme on le fait actuellement avec le dispositif de signalements Il serait bien d ajouter une vid o tr s courte dans le mail de lancement qui pr sente les valuations Cela permettrait aux tudiants qui tait absent lors de la pr sentation orale d avoir un c t humain la d marche et cela donne un petit c t ludique Il faudrait viter le genre de mot comme beaucoup et bien dans le questionnaire car ils ne sont pas clairs Par exemple la question Globalement ce module vous apporte beaucoup un tudiant qui coche non aura peut tre plus appris que celui qui coche oui Harvard les professeurs font eux m mes leurs propres questionnaires ce qui leur donne des Yasmina Chapuis 42 66 Mise en ligne d un sy
12. le nombre de module approximativement valu est d environ 150 cours par semestre Choix de l outil L UNINE effectue depuis 2009 l valuation en ligne Chaque enseignement est diff rent Il tait donc normal pour l UNINE que les questionnaires soient diff rents d un cours l autre Une valuation en ligne permettait de diversifier les questionnaires ce qui tait difficile pour une valuation papier De plus ce mode de fonctionnement permet une grande conomie de papier le syst me de scannage ne permettait pas d conomiser le papier et est beaucoup plus pratique Le secteur Qualit utilisait au d but le programme SurveyMonkey mais ils se sont pench par la suite sur le programme Qualtrics outil d dition de questionnaire d analyse de r ponse de mise en forme et de gestion des envois car il tait un peu plus simple que SurveyMonkey Contenu du questionnaire l UNINE chaque questionnaire d valuation des cours est diff rent L Universit utilise l expression de questionnaire la carte L enseignant compose son propre questionnaire en choisissant 6 questions d une liste qui en compte une trentaine et en ajoutant s il le souhaite 3 questions suppl mentaires qu il peut r diger Une question sur l appr ciation globale du cours est commune tous les questionnaires afin de pouvoir faire des comparaisons entre les cours Enfin il y a un encadr permettant de noter des remarques Les questionnaires se co
13. mais les membres des commissions ont tabli que la HEP ne remplissait pas les crit res requis par la CDIP La cons quence a t la r organisation de la HEP et donc la remise en cause de la qualit de ses formations C est dans ce contexte qu en 2005 la HEP a mis en place une valuation des enseignements par les tudiants tout comme de nombreux tablissements de formation Cette valuation a t dirig e par son Unit Qualit UQ Cf Termes et d finitions Cf Termes et d finitions Cf Termes et d finitions Cf Termes et d finitions Cf Termes et d finitions Yasmina Chapuis 6 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Actuellement cette valuation se fait sur papier mais la proc dure et les questionnaires en eux m mes repr sentent quelques inconv nients et pourraient tre am lior s De ce fait mon travail portera sur le test d une nouvelle version des questionnaires d valuation en ligne Premi rement le travail comportera une partie th orique sur l EEE la HEP et dans d autres institutions afin de faciliter la compr hension du projet chapitres 1 4 Puis le chapitre 5 abordera la question de l organisation de l valuation en ligne Les chapitres 6 8 2 concerneront essentiellement la construction de l outil le lancement de l valuation et la r colte des donn es Ensuite les chapitres 8 3 10 toucheront
14. mes 3 3 Probl mes et critiques des valuations des modules Malgr une proc dure et une d marche labor es au mieux de nombreuses critiques sont formul es par l Unit Qualit par les formateurs par les responsables de modules ou encore par les tudiants Le tableau de l annexe 5 d taille les probl mes voqu s par les entit s concern es et selon certains aspects Il sugg re galement des pistes d am lioration Il est bas sur le rapport interm diaire du GT Dispositif et sur tout ce que j ai remarqu qui posait probl me lors du lancement de la saisie et des analyses de l valuation 10A Cf annexe 4 Yasmina Chapuis 16 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Les probl mes principaux qui doivent tre r gl s en premier sont Le fait que les formateurs ne rendent pas toujours de feedback aux tudiants ce qui peut engendrer par la suite une baisse de motivation pour les prochaines valuations remplir et donc un taux de retour plus bas Ensuite les formateurs et responsables de modules ne rendent pas tous le rapport d auto valuation la Direction de la formation ce qui est f cheux car il leur permet de faire un bilan sur leur enseignement et de trouver des mesures prendre pour am liorer ce dernier La proc dure actuelle engendre une grosse perte de temps surtout dans la saisie des r ponses par l UQ et dans la distributio
15. pour chaque question un nombre un pourcentage et un graphique Ces r sultats sont envoy s aux enseignants en format PDF avec un message 6 Si l enseignant le souhaite il peut discuter de ses r sultats avec le conseiller Si certains cours sont mal valu s le conseiller contacte les enseignants 8 la fin du semestre un mail est envoy aux enseignants pour leur demander si les r sultats des valuations et la d marche en elle m me ont t utiles 9 Communication d une synth se g n rale des r sultats comportant un graphique avec la question commune de tous les cours afin d tablir des statistiques entre les diff rents cours N Participation Une valuation en ligne peut rendre le taux de retour plus bas que la version papier car les tudiants ne sont plus astreints remplir le questionnaire lors d un cours mais durant la semaine qui leur est indiqu e Cependant l UNINE le taux de retour est globalement bon Il se situe habituellement entre 70 et 85 Traitement des donn es et exploitation des r sultats La gestion des donn es et le traitement des r sultats sont effectu s par deux personnes du secteur Qualit Aucun r sultat n est analys Une fois t l charg ils sont directement envoy s aux enseignants et servent exclusivement ces derniers De temps en temps une analyse des remarques des tudiants est entreprise Probl mes actuels li s l valuation La seule pr occupation
16. tudiant e s remplissent les questionnaires sans crainte l anonymat leur est garanti Pour encourager un taux de retour important les questionnaires sont compl t s dans le cadre d un cours du module en pr sence d un e formateur trice Pour assurer la confidentialit le la conseiller re qualit charg e de conduire la d marche et notamment le d pouillement des questionnaires est soumis e au secret de fonction y compris face au Comit de direction Pour donner un sens la d marche aupr s des tudiant e s les formateurs trices sont tenu e s de renseigner les tudiant e s sur les r sultats obtenus 2 3 5 Le choix des modules valuer la HEP chaque semestre a lieu l valuation des enseignements Tous les modules sont concern s quelques exceptions pr s C est pourquoi la Direction de la formation doit fournir une liste des modules qui doivent tre valu s Exceptions Un module peut avoir lieu sur toute l ann e et non pas pour un semestre Dans ce cas l on valuera le module seulement la fin de l ann e acad mique D apr s la proc dure pour l valuation de l enseignement 10P r dig e par l Unit Qualit la HEP les semestres ont une notation particuli re on met tout d abord les deux derniers chiffres de l ann e en cours et ensuite la premi re lettre de la saison du semestre Exemple 10P semestre printemps 2010 et 10A semestre automne 2010 Yasmina Cha
17. tudiants par rapport l valuation en ligne Dans chaque partie il y a les diff rentes questions choisies Pour voir la nouvelle structure du questionnaire voir l annexe 9 Yasmina Chapuis 23 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud la fin les r sultats seront trait s en deux parties l valuation du module qui contiendra les quatre premiers points et l valuation de l outil qui contiendra les critiques des tudiants 6 2 Choix dudogiciel Le choix du logiciel s est port sur SurveyMonkey SurveyMonkey est un logiciel sur internet qui permet de cr er des sondages pratiques et professionnels en ligne Il est gratuit ou payant si on veut pouvoir utiliser des fonctions plus avanc es Il dispose de plusieurs types de question on peut y ajouter des champs de commentaires il y a diff rents mod les de sondages on peut ajouter un mot de passe au sondage des rapports sont g n r s automatiquement lors de la cl ture du sondage etc Ce logiciel est utilis fr quemment par l Unit Qualit dans le but de faire des sondages pour les valuations de l organisation de manifestations et v nements pour les valuations de plans d tudes pour les valuations de certaines formations ou encore pour des inscriptions Je peux donc me baser sur ces exp riences pour tirer profit de ce logiciel et je sais que ce dernier r pond bien aux besoins d une valuation en l
18. valuation de vive voix comme je l ai fait dans ce travail Cependant ci cela n est pas possible on peut rajouter dans le mail envoy aux tudiants une petite vid o o un membre de l UQ ou autre pr sente de la m me mani re qu une pr sentation en classe les EEE Cela permet de garder un c t humain la d marche et c est plus ludique et peut tre plus motivant pour l tudiant Dans le mail de lancement il faut expliquer clairement le but de l EEE et ce que gagne l tudiant y r pondre Il faut aussi pr ciser comment est garantit l anonymat des tudiants afin de les soulager L valuation des enseignements par les tudiants devrait toujours tre valu e avant les examens Ou apr s seulement dans le cas o deux valuations sont entreprises Apr s que le mail de lancement soit envoy aux tudiants faire un rappel avant l ch ance est n cessaire Et un rappel peut tre fait apr s l ch ance en rallongeant le d lai au cas o le taux de retour n est pas assez lev Une fois l envoi des r sultats au responsable de module je pense qu il est important de pr ciser que ces r sultats ne sont pas cens tre divulgu en dehors du responsable et des formateurs du module en question Enfin le feedback n tant pas dans tous les cas donn aux tudiants il faudrait imagin une mani re de faire la v rification Questionnaire Du point de vu du contenu du questionnaire il faudrait ajouter dans le
19. ve UNIGE elle est en pleine transition des valuations papiers aux valuations en ligne Elle est int ressante car elle vient de passer le stade que la HEP cherche passer et me sera donc utile pour alimenter ma r flexion L Institut F d rale des hautes tudes en Formation Professionnelle IFFP elle effectue son valuation en ligne La Haute Ecole de Gestion de Gen ve HEG GE elle effectue d apr s la documentaliste de l UQ son valuation en ligne avec IS Academia L Universit de Neuch tel UNINE elle effectue son valuation en ligne avec Qualtrics Les trois derni res sont int ressantes car elles sont d j pass es un syst me informatis ce qui pourra me donner des informations utiles sur leur outil et leur proc dure Afin d avoir toutes les informations n cessaires sur ces institutions de formation j ai pr par un questionnaire que j utilise lors d entretiens avec les personnes en charge des valuations des quatre institutions Voici un tableau qui compare les diff rentes informations de chaque institution de formation Pour voir la synth se compl te de chaque institution voir l annexe 7 Cf Termes et d finitions Cf Termes et d finitions 46 Cf Annexe 6 Yasmina Chapuis 18 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Tableau 1 Tableau comparatif des m thodes d EEE dans d autres institutions Permettre chaque
20. 1 Yasmina Chapuis A 60 Annexes 24 Graphiques de l valuation de l outil Semestre 10A Graphiques R sultats critiques xis Q 15 Avez vous eu des probl mes acc der au questionnaire Oui Non 0 0 20 0 40 0 60 0 80 0 100 0 Q 16 Q 19 Le questionnaire est d une longueur acceptable Les questions qui concernent le module dans son ensemble sont clairement distingu es des questions qui portent sur chacune des unit s Pas d accord Plut t pas d accord Plut t d accord Les nonc s des questions sont clairs D accord La mise en page du questionnaire est agr able Sans avis 0 0 20 0 40 0 60 0 80 0 100 0 En ligne A l avenir vous pr f reriez remplir le questionnaire Dans sa version papier C est gal 0 0 20 0 40 0 60 0 80 0 1000 SSans avis Yasmina Chapuis Unit Qualit Evaluation test 09 03 11 1 1 Yasmina Chapuis A 61 Annexes 25 Commentaires des tudiants de l valuation de l outil Semestre 10A Commentaires Resultats critiques xls Avez vous eu des probl mes acc der au La mise en page du questionnaire est questionnaire agreable Les nonc s des questions sont clairs Si vous n tes pas d accord merci de Si vous n tes pas d accord merci de pr ciser votre r p pr ciser votre reponse La premi re fois que j ai essaye d y r pondre le questionnaire me On ne souhaite pas forcement mettre tout deman
21. Finalement ils d cident de se voir dans une future s ance la rentr e 11A pour mettre au point toutes les choses am liorer Les enseignants n ont donc pas encore pris de d cision concernant l ensemble des mesures prendre pour am liorer le module mais ils ont surtout des id es IIS ne peuvent pas encore prendre de mesure car le module va beaucoup changer d ici la rentr e acad mique Certains professeurs vont partir de nouveaux vont arriver Ils veulent attendre que le module soit stable pour prendre Yasmina Chapuis 40 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud de r elles d cisions Mais ils se sont pos s quelques questions notamment par rapport au contenu du module et l anticipation des r servations de salles 10 5 Utilisation des r sultats dans les unit s Les r sultats ont permis chaque formateur de r fl chir des am liorations pour leurs propres unit s Les seules mesures qui ont d j t prises sont le fait d am liorer les liens entre les unit s pour la bonne coh rence du module par exemple en donnant au d but du semestre un document qui permet de percevoir ces liens et les deux derni res p riode du semestre de l une des unit s doit tre am lior es car la fin de cette unit a t critiqu e par les tudiants Ce sont de petites modifications des unit s qui sont pr vues pour le moment en attendant une prochaine s ance qu
22. Le questionnaire actuel Le questionnaire d valuation des modules actuel a t labor par le Groupe d Accompagnement Qualit GA Qualit et un groupe de formateurs Les outils utilis s l Universit de Lausanne UNIL et l Ecole polytechnique f d rale de Lausanne EPFL ont t pris comme mod le pour son laboration Les questionnaires sont distribu s au plus tard lors du dernier cours du semestre en cours et leur remplissage demande une vingtaine de minutes se compose actuellement de quarante quatre questions Trente quatre questions r ponses ferm es Q 1 Q 34 et trois questions r ponses ouvertes Q 38 Q 40 Trois autres questions Q 35 Q 37 peuvent tre rajout es par les responsables de modules s ils le souhaitent Enfin il y a quatre questions suppl mentaires qui sont destin es exclusivement aux tudiants de lt L Master S1 MS1 et Dipl me S2 MS2 Le num ro du module le nom du module et les sept premiers items qui correspondent aux niveaux de ma trise vis s par le module doivent tre compl t s par les responsables de modules avant la distribution des questionnaires L chelle utilis e est une chelle d appr ciation quatre niveaux d accord non plut t non plut t oui oui et un sans avis L valuation se fait chaque semestre Les questions du questionnaire actuel n valuent que le module et non les unit s ce qui pose souvent des probl
23. O E 4 O O oO O oO 5 O O oO O oO 6 O O oO O O 7 O O oO O oO Structure du module 8 La proportion entre les cours et les s minaires est ad quate O O oO O oO 9 Les liens entre les cours et s minaires sont clairs et suffisants O O oO O o 10 La quantit du travail personnel demand est ad quate O O oO O o 11 L valuation formative vous permet de progresser O O O O O 12 Les modalit s d examen sont explicites oO oO o o o 13 Le module est globalement coh rent oO oO oO oO o Contenu du module 14 Le module est conforme au descriptif du plan d tude O O O O O 15 Le module stimule votre r flexion O O O O oO 16 Les lectures conseill es sont utiles oO oO oO oO o 17 Le module est utile la pratique d enseignant e oO o o oO o Place du module dans la formation 18 Vous disposiez des connaissances pr alables n cessaires pour suivre O O O O O ce module avec profit 19 Le module est bien int gr dans le cursus de formation oO oO oO o o 20 Les liens entre les stages et ce module sont coh rents O O O O o Qualit YC 01 11 10 Page 1 2 Yasmina Chapuis A 5 Annexes hep Haute cole p dagogique Qualite Avenue de Cour 33 CH 1014 Lausanne www hepl ch plut t plut t non non oui oui sans avis Modalit s d enseignement 21 Les expos s sont pr sent s de fa on claire 0 o0 O O O 22 Les supports de cours transparents vid o sont de qualit O O 0 O O 23 Le contenu des documents fournis est ad quat oO oO o
24. adultes 0 0 E 0 E 38 Quels sont selon vous les points forts du module 39 Quels sont selon vous les aspects du module am liorer 40 Suggestions pour favoriser une meilleure atteinte des niveaux de ma trise attendus une meilleure appropriation des contenus ou la qualit g n rale du module Merci de votre collaboration Ce questionnaire est remettre soit au formateur la formatrice qui le consignera la fin du cours sous enveloppe ferm e l Unit Qualit soit directement l Unit Qualit bureau C33 319 Qualit YC 01 11 10 Page 2 2 Yasmina Chapuis A 6 Annexes e 7 e e Z po e 2 5 Tableau des probl mes li s au questionnaire papier et am liorations possibles Entit s 2e i Probl mes Am liorations possibles suggestions concern es Responsables de module La proc dure actuelle est peu claire et assez Proc dure Formateurs compliqu e Revoir la proc dure Faire l valuation des modules apr s les Les questionnaires sont remplis l un des derniers examens lorsque les tudiants ne sont plus LA Responsables cours du semestre donc juste avant les examens stress s Certes l valuation sera faite au d but de module C est emb tant pour les tudiants et les formateurs d un semestre et portera sur le semestre Formateurs de devoir consacrer une partie d un cours important pr c dent mais au moins les tudiants Proc dure Etudiants au remplissage des questio
25. auxquelles les tudiants ne peuvent pas r pondre Comme la question 20 car ils n ont pas encore eu de stage la question 11 s ils n ont pas encore eu d valuation formative ou encore la question 8 s ils n ont qu un cours et pas de s minaire ou vice versa Dans ce cas l certains ne sachant pas quoi r pondre cocheront la note non la plus basse ce qui faussera les r sultats Si les r sultats de l valuation sont n gatifs les formateurs peuvent tre totalement d moralis s vuln rables et avoir une grosse pression sur les paules La confidentialit et l anonymat ne sont pas forc ment respect s puisqu la fin du cours ce sont les formateurs qui ramassent les questionnaires et les envoient l UQ Demander aux enseignants d enlever les questions qui ne correspondent pas leurs modules avant de les distribuer aux tudiants Ou alors de pr ciser aux tudiants quelle case ils doivent cocher dans un cas pareil Ou encore de rajouter un niveau de r ponse gal ne me concerne pas Il serait bien que dans le cas o un formateur re oit de tr s mauvaise critique le responsable de module puisse lui dire qu il faut am liorer son cours mais ne pas lui confier tous les r sultats Soit il faudrait que les tudiants ramassent les questionnaires les mettent dans une enveloppe ferm e et les mettent directement dans la bo te aux lettres jaune interne Soit que l valuation soit faite devant un membre d
26. avis y a t il d autres questions qui devraient figurer dans ce questionnaire afin que le module soit valu correctement Si oui lesquelles al Le Merci beaucoup pour votre pr cleuse collaboration qui nous aldera dans le d veloppement de cet enselgnement et de cet outil d valuation Pour tout renseignement Yasmina Chapuis E mail yasmina chapuis hepl ch T l 021 316 06 85 Version 7 d cembre 2010 Veuillez cliquer sur Termin Yasmina Chapuis A 38 Annexes 12 V rification de la fonctionnalit du questionnaire sur SurveyMonkey Il faut tout d abord choisir le collecteur Chargez vos propres courriers lectroniques et nous enverrons une invitation pour votre sondage puis il faut saisir le nom que l on veut donner au collecteur Ici je le nomme collecteur test Ensuite appara t une page o l on a deux actions effectuer Evaluation du module 10A Modser Concevez un sondage R coltez des r ponses Analysez Afficher un r sum Nouvelle invitation par courrier lectronique Modi er invitation par courrier lectronique PA diter les destinataires diter les messages RAPPEL avant que nous puissions envoyer votre sondage veuillez effectuer les actions suivantes 1 Ajouter des destinataires votre lists Modifier les param tres 2 Cr er un message que nous enverrons Modifier les restrictions Destinataires Messages Aucun destinataire n a encore t ajout Aucun message n a encore
27. cl ture la session analyse les r sultats et donne les droit d acc s au REV et aux enseignants concern s par les valuations environ 3 semaines apr s les examens dans le but qu il n y aie pas de cons quences dans les corrections des examens de la part de l enseignant 9 L enseignant consulte les r sultats de l valuation de son cours et peut s il le d sire r diger un compl ment l valuation en cas de propos d plac s Ce compl ment sera ajout au dossier par le REV 10 Environ 5 semaines apr s les examens la direction le RC et les RF concern s re oivent des droits d acc s AGE afin d acc der l valuation is Participation Le taux de retour de la part des tudiants se situe la HEG GE autour des 46 Selon l institution ce taux de retour est globalement bon Ayant un syst me d valuation volontaire elle aurait pu avoir un taux nettement plus bas Cependant le but de la HEG GE est d arriver un taux d environ 60 Pour ce faire il faut encourager les enseignants motiver les tudiants Le temps pour r pondre un questionnaire est relativement bas Il faut un tudiant environ 2 minutes pour r pondre au questionnaire Traitement des donn es et exploitation des r sultats Les r sultats sont g n ralement transmis aux enseignants au REV au RCE et la direction Probl mes actuels li s l valuation Si l institution veut que les EEE fonctionnent et que les tudiants r p
28. d enseignant et l enthousiasme des formateurs El ments relev s comme des aspects am liorer pr s de 20 des r pondants Le manque de clart par rapport aux modalit s de certification consignes pr parations in gales int r t de la modalit d examen retenue 6 mots Dans une moindre mesure min 10 des r pondants sont aussi relev s les s minaires longueurs manque de contenu et le manque de liens entre les unit s de formation Remarque cette synth se se base uniquement sur le point de vue des tudiants et n int gre pas le regard du des formateur s Qualit T l 41 21 316 38 03 Fax 41 21 316 33 97 paola ricciardi joos hepl ch Yasmina Chapuis A 57 Annexes 22 R sultats transmis habituellement aux formateurs Question n 30 Combien d heures hebdomadaires consacrez vous en dehors des cours au travail li ce module Dans quelle fil res Semestres d tude tes vous inscrit e 1 66 1 6 23 29 11 l 2 2 0 3 0 4 0 5 0 6 0 7 0 8 0 9 0 0 Taux de r ponses Taux et nombre N de r ponses Atteinte des niveaux de ma trise du module non _ plut t nonblut t ouf _ oui autres oui plut t oui non plut t non N sans autres _ N total 1 maitriser les concepts linquistiques pr sent s principalement dans l UF1 1 2 maitriser les concepts didactiques pr sent s 2 analyser de mani re critique des supports et des situations 3 d enseianement apprent
29. de retour et le taux d l ves globalement satisfaits Puis je cr e un onglet Pr paration du graphique en qui contient les pourcentages des r ponses des questions 1 9 et 11 1 11 6 L onglet Graphiques poss de un ou plusieurs graphiques cr es sur la base de l onglet de pr paration Enfin je copie tous les commentaires des tudiants et je les colle dans un nouvel onglet qui se nomme Commentaires 8 2 R sultats de l valuation du module Une fois la mise en page des r sultats termin e il faut enregistrer le tableau de fr quence les deux graphiques qui concernent le module et les unit s et les commentaires dactylographi s des tudiants en format PDF Le tableau de fr quence permet d avoir un aper u pr cis et chiffr des r sultats du module Il contient le nombre et le pourcentage d tudiants ayant r pondu une certaine modalit dans chaque question Les graphiques repr sentent les pourcentages des tudiants pour chaque modalit aux questions 1 9 et 11 1 11 6 Le graphique permet d avoir une 53 Cf Annexe 17 4 Cf Annexe 18 Cf Annexe 19 Yasmina Chapuis 31 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud repr sentation un peu diff rente Pour certaine personne il est plus facile de visualiser un graphique qui contient des couleurs plut t qu un tableau Les commentaires des tudiants permettent aux enseignants d avoir un peu
30. du module la Direction de la formation Le responsable de module peut produire ce rapport avec ou sans la collaboration des formateurs de son module Pour le r diger il peut s appuyer sur un canevas mis sa disposition par l Unit Qualit sur l Extranet Document Evaluation des modules proc dure en trois temps Reconnaissance des titres HEP Afin d assurer un dipl me reconnu sur l ensemble du territoire suisse ses tudiants la HEP se doit de renouveler la reconnaissance de ses titres selon diff rents crit res pour respecter les standards et le cadre de qualification suisse R criture des textes pour le nouveau site de la HEPL Site public Reconnaissance des titres et standards de la formation Recteur HEP Directeur de la HEP Redondant Qui r p te une information dans un message linguistique des donn es informatiques etc Dictionnaire Sensagent dictionnaire sensagent com Revue de direction Une revue de direction est une r union planifi e qui se d roule au sein d un organisme donn e pour faire le point sur son syst me de management Dictionnaire Sensagent dictionnaire sensagent com S minaire Groupe de travail tudiant un sujet donn Dictionnaire Sensagent dictionnaire sensagent com S minaire d int gration HEP Cette modalit permet aux tudiants partir de leurs acquis identifi s sur la base du r f rentiel de comp tences d tablir des liens entre des savoir
31. es T l chargez l ensemble des r ponses de votre sondage afin de les importer dans une feuille de calcul o une base de donn es Choisissez le format Format CSV Le r eum sara format sous la forme d un fichier CSV O les valeurs sont s par es par des virgules O Format Excel Le r eurn sera format de fa on S ouvVOr dans un togicel os feuille de calcul O Format XML Le r sume sera format sous le forme d un fichier XML O Format HTML Le r sum sera format au format HTML et pourrs ainsi facilement tre post sur un site Web o Format PDF Le r sum sera format au format PDF et pourre ainsi facilement tre mprim Demander le t l chargement On peut aussi t l charger l ensemble des r ponses r colt es dans le format qu on veut Cf Termes et d finitions 1 Cf Termes et d finitions 1 Cf Termes et d finitions Cf Termes et d finitions Yasmina Chapuis A 49 Annexes Choisissez un type de t l chargement O R sum du rapport T l chargez un r sum Qu rapport de votre sondage que vous DOUTEZ emegsirer ou IMpNmer Toutes les r ponses r colt es l t chargez l ensemble des r conses de votre sondage afin de les importer dans une feuille de Calcul ou une base de donn es Choisissez le format Format pour une feuille de calcul Les donn es sont ornmat es a n de pouvoir tre ouvertes laide d un logiciel de feuilles de calcul Choisissez les options C GE
32. et des r sultats Il reste ces quelques questions approfondir D un point de vue personnel ce travail a t tr s int ressant et m a beaucoup apport m a permis de me plonger pleinement dans le monde du travail dans le sens o ce projet porte beaucoup plus sur un c t concret pratique que th orique J ai pu effectuer de nombreuses collaborations notamment avec des coll gues des tudiants des formateurs et des collaborateurs d autres institutions Ces collaborations ont t tr s int ressantes et enrichissantes J ai t surprise de la disponibilit de ces personnes participer ce projet ou r pondre mes questions Ce travail m a de plus permis d acqu rir une meilleure compr hension du projet et du besoin de passer un syst me informatis et de d velopper mon sens critique d analyse et de r flexion que je n avais pas avant de faire ce travail Yasmina Chapuis 48 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Pour conclure la mise en ligne des valuations des enseignements par les tudiants est une pr occupation importante pour les institutions ne serait ce que pour mieux r pondre aux besoins des tudiants des formateurs et du personnel administratif Ce travail devrait permettre l Unit Qualit de se lancer dans un nouveau test et de passer enfin un syst me informatis Yasmina Chapuis 49 66 Mise en ligne d un syst
33. et suggestions compl mentalres sur le module ES ES Yasmina Chapuis A 74 Annexes Evaluation des modules Proposition de questionnaire 5 Fin Souhalterlez vous rencontrer l un des formateurs pour mieux expliquer vos commentaires SI oul veuillez Inscrire le nom du formateur que vous souhaitez rencontrer et votre nom Nom du formateur Nom de l tudiant Merci beaucoup pour votre pr cieuse collaboration qui nous aidera dans le d veloppement de cet enseignement et de cet outil d valuation Pour tout renselgnement Unit Qualit E mail evaluations hepl ch T l 021 316 06 85 Version 18 mai 2011 Veulllez cliquer sur Termin Yasmina Chapuis A 75
34. exclusivement la communication des r sultats et l analyse des r sultats Enfin les chapitres 11 et 12 exposeront une conclusion sur les r sultats et sur l exp rience Yasmina Chapuis 7 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 2 El ments th oriques 2 1 Roue de Deming Toute organisation se doit d avoir une bonne gestion de la qualit afin de permettre d am liorer la qualit et de satisfaire les besoins de ses clients La roue de Deming autrement d nomm e PDCA Plan Do Check Act fait partie d une des m thodes utilis es pour la gestion de la qualit Elle signifie planifier d velopper contr ler et agir Cette m thode a t lanc e en 1925 par Juran et Shewart qualiticiens dans une soci t Mais c est Wiliam Edwards Deming statisticien qui va faire conna tre cette m thode dans le monde lorsqu il pr senta l outil au Japon en 1950 Le nom de Deming resta donc attach cet outil La roue de Deming consiste rep rer toutes les tapes suivre pour l am lioration de la qualit d une organisation Le proc d comporte quatre tapes diff rentes qui mettent en place un cercle vertueux permettant sans cesse d am liorer la qualit Ces quatre tapes sont 1 Plan Planifier pr parer d finir D finir le but atteindre les objectifs les moyens n cessaires ces objectifs planifier ce que l on va r aliser iden
35. fili re pr scolaire et primaire fili re secondaire 1 fili re secondaire 2 fili re p dagogie sp cialis e et fili re formations postgrades HEP Vaud www hepl ch FORDIF La Haute cole p dagogique Vaud l Institut de hautes tudes en administration publique linstitut f d ral des hautes tudes en formation professionnelle et l Universit de Gen ve travaillent en partenariat dans le domaine de la formation des directrices et directeurs d institutions de formation Cette collaboration permet d offrir un Certificate of Advanced Studies un Diploma of Advanced Studies et ou un Master of Advanced Studies Cette formation est mise en place en collaboration avec la CIIP FORDIF www idheap ch Formateurs Enseignants Formation continue HEP L Unit de formation continue et prestations de service de la HEP ambitionne de r pondre aux attentes et aux besoins des professionnels d ployant jours apr s jours leurs comp tences dans les coles et les institutions de formation Orient es par le r f rentiel de comp tences de la HEP chacune des offres de formation continue propos es par la HEP vise une volution harmonieuse et efficace des prestations de l cole publique une opportunit de construire des r ponses efficaces la complexit des situations professionnelles et des possibilit s d enrichissement et de d veloppement professionnels HEP Vaud www hepl ch Yasmina Chapuis 55 66 Mise en ligne d u
36. invitation pour votre sondage Vous pouvez charger vos couriers lectroniques et nous enverrons une invitation pour votre sondage en voire nom Vous pouvez personnaliser le message envoyer et voir qui y r pond dans votre liste NOUVEAU Ajouter votre sondage votre site Web Int grez votre sondage votre site Web ou affichez le dans une fen tre contextuelle f Partagez votre sondage sur Facebook Distribuez voire sondage vos amis et vos coll gues en toute simplicit via Facebook Saisissez un nom pour ce collecteur Nom Nouvelle invitation par courrier lectronique Annuler tape suivants Le premier choix permet de cr er un lien Il suffit de copier le lien et de le coller dans un message lectronique pour que les personnes recevant le message puissent cliquer dessus et acc der au questionnaire Le deuxi me choix permet d ajouter une liste des adresses mails des destinataires dans le syst me et de cr er des messages personnalis s de courrier lectronique par exemple messages d invitation et rappels La livraison des messages peut tre planifi e l avance Le lien est unique pour chaque destinataire du message ce qui permet d assurer le suivi des personnes qui ont r pondu et d envoyer des rappels celles qui n ont pas encore r pondu au questionnaire Les troisi me et quatri me choix permettent d ins rer le lien du questionnaire sur Facebook ou sur un site Web Mon choix s est port sur
37. le collecteur d invitation par courriers lectroniques car il me permet d envoyer un message de lancement tous les tudiants et d envoyer des rappels seulement ceux qui n ont pas encore r pondu au questionnaire Cela vite d emb ter ceux qui ont d j r pondu 6 5 V rification de la fonctionnalit Afin d tre s r que tout fonctionnera correctement lorsque le premier mail d invitation r pondre au questionnaire sera envoy aux tudiants il est important de faire un test avec l Unit Qualit Pour voir toute la d marche de v rification de la fonctionnalit du questionnaire aller l annexe 12 Une fois les essais termin s les remarques des membres de l UQ r colt es et les changements effectu s on peut enfin s attaquer au lancement du questionnaire Yasmina Chapuis 25 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 7 Lancement de l valuation du module et r colte des donn es Le lancement de l valuation du module n est pas une chose prendre la l g re Il y a tout un processus de pr paration ne pas n gliger car c est un des moments les plus importants du projet La moindre erreur pourrait me donner un mauvais taux de retour de la part des tudiants Il faut donc faire un mail de lancement parfait qui r sume bien la situation et pr parer une bonne pr sentation aux tudiants 7 1 Mail de lancement de l valuation D apr s le te
38. m me mani re que ceux qui ont r ussi Avant les examens les tudiants auront un avis sur le contenu du module alors que si c est apr s ils auront un avis par le biais de la r ussite ou de l chec 6 Cf Annexe 26 Yasmina Chapuis 37 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud de leur examen Ce deuxi me aspect n est pas pertinent pour l valuation de l Unit Qualit 4 des formateurs pr f reraient valuer leur module apr s les examens Avant les examens les tudiants n ont pas tous d j commenc travailler et r viser ce qui peut avoir un effet sur les valuations Alors qu apr s les examens ils sont conditionner impr gner du cours ils feront plus de liens et seront par cons quent plus aptes juger le cours En outre l examen fait partie du module ainsi l examen devrait faire partie de l valuation Le formateur manquant est partag Il trouve que ces deux d marches sont totalement diff rentes elles ont deux lectures diff rentes et ont des retours initi s diff remment suivant la r ussite ou l chec l examen En un mot pour les formateurs il serait int ressant de faire deux valuations Une avant les examens afin d valuer le module et son contenu Et l une apr s dans le but de voir si ce que les tudiants ont appris en cours leur a t profitable l examen Dans un dernier temps malgr le fait que les enseignants trouv
39. minaire ou TP Les questionnaires se composent d une partie commune pour tous les cours d une m me facult d une partie individuelle qui permet l enseignant de cr er ses propres questions et d une partie commentaire I contient 20 questions 12 communes 5 individuelles et 3 pour la r daction de commentaires Les questions sont relatives la prestation de l enseignement objectifs du cours structure de l expos clart des notions int r t pour la mati re etc au contexte de l enseignement compr hension de l importance du cours pour le plan d tudes correspondance de la mati re du cours aux besoins de formation etc et l appr ciation globale du cours satisfaction de l enseignement Proc dure L UNIGE effectue sa phase pilote pour la facult SES sciences conomiques et sociales de cette fa on 1 FormEv met sur pied une base de donn e institutionnelle qui permet d avoir la liste de tous les cours de tous les enseignants qui les enseignent des cr dits etc 2 FormEv envoie le questionnaire ad quat selon la base de donn es l enseignant et lui demande s il veut rajouter des items libres Yasmina Chapuis A 21 Annexes 3 pr sent deux cas peuvent figur s soit les questionnaires seront trait s par scannage soit en ligne 4 a FormEv ajoute les items et envoie 4 b FormEv ajoute les items et envoie un questionnaire en format PDF un lien aux tudiants pour les l enseignant pour les cou
40. on veut et que c est plus efficace car en classe tout le monde est contraint de participer Certains tudiants n ont pas forc ment acc s un ordinateur ou Internet Certains pr f rent r pondre quand le temps est pris en classe et non pas pendant leur temps libre Ils pensent pouvoir crire des commentaires beaucoup plus d taill s que s ils le faisaient en ligne et enfin ils aiment voir la personne qui ils doivent retourner les questionnaires au cas o ils auraient des questions Deux tudiants ont fait une proposition d am lioration en se disant que s ils avaient la possibilit de noter une remarque dans chaque question et si le module tait valu apr s les examens ils pr f reraient alors remplir le questionnaire en ligne Derni rement la question 21 votre avis y a t il d autres questions qui devraient figurer dans ce questionnaire afin que le module soit valu correctement Si oui lesquelles j obtiens beaucoup de renseignements sur quels th mes les tudiants voudraient donner leurs avis Ils aimeraient tout d abord que soit pos une question sur l appr ciation des enseignants les formateurs r pondent ils vos questions de fa on appropri e Est ce qu ils vous soutiennent dans votre travail Est ce que vous comprenez leurs explications IIS souhaiteraient une question sur la somme de travail la somme de travail est elle minime suffisante ou importante sur les horaires les horaires de
41. par cons quent des modifications quant la structure du questionnaire Le questionnaire en ligne comportera deux parties une partie avec les questions concernant essentiellement l valuation du module et une partie avec des questions sur l outil utilis Les questions ont t choisies sur la base de critiques re ues concernant le questionnaire actuel et sur la base d un ancien questionnaire test qui avait t r alis par le GT Dispositif J ai gard 7 questions de l ancien questionnaire car elles sont int ressantes et importantes Les autres questions ne paraissent pas capitales pour figurer dans le questionnaire D autres questions ont t rajout es car elles semblaient plus pertinentes Des questions sur les unit s ont aussi t ins r es pour qu on puisse avoir un aper u plus vaste et que les formateurs puissent mieux identifier s il y a des am liorations faire dans leurs unit s Le questionnaire sur l valuation du module et l valuation des unit s est plus court afin de ne pas d motiver les tudiants Enfin pour avoir l avis des tudiants sur l outil et l valuation en ligne des questions suppl mentaires ont t rajout es la fin du questionnaire Une fois toutes les questions choisies on peut entamer la nouvelle forme du questionnaire Le questionnaire comporte 5 parties information g n rale valuation du module valuation des unit s commentaire sur le module et critiques des
42. pondre un dimanche un questionnaire C est tr s positif car on peut se rendre compte que certains tudiants pr f rent y r pondre lorsqu ils ont en vraiment le temps Et non pas en vitesse entre deux cours Le 21 12 10 vient le premier rappel pour informer les tudiants de l ch ance Gr ce ce rappel 23 tudiants en plus ont r pondu au questionnaire On peut en conclure que ce rappel est n cessaire Puis j ai d cid de laisser les tudiants tranquilles pendant la p riode de f tes du 24 12 10 au 02 01 11 c est pourquoi l volution se stabilise O tudiant Finalement j envoie un dernier rappel apr s la p riode de f te le 03 01 11 ce qui relance quelques tudiants mais tr s peu Suivant comment auraient volu les r ponses ce dernier rappel n aurait pas t n cessaire 5 Je repr cise que pour les rappels j utilise des param tres sur SurveyMonkey qui contraint le syst me envoyer des rappels qu ceux qui n ont pas r pondu Cela vite d emb ter les tudiants qui ont d j r pondu Yasmina Chapuis 29 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 8 R sultats Une fois l valuation du module lanc e et les rappels envoy s il faut attendre de recevoir les r ponses des tudiants dans le syst me de SurveyMonkey fermer le collecteur t l charger les r sultats et enfin les mettre en forme 8 1 Mise en forme du fichier d
43. questionnaire tait de 202 tudiants la cl ture du questionnaire j ai re u 151 retours ce qui correspond un taux de retour de 74 8 L une des principales craintes de l valuation en ligne tait que j aie un taux de retour bas Or si je compare ce taux avec les taux d autres modules valu s au semestre 10A et ayant plus ou moins le m me nombre d tudiants l valuation en ligne est tout fait dans la moyenne Les taux de retours des autres modules sont compris entre 70 et 85 Sur les 151 personnes qui ont r pondu au questionnaire 144 tudiants ont termin le questionnaire 95 4 6 personnes se sont arr t es la premi re partie du questionnaire informations g n rales et une personnes s est arr t e la partie 56 Cf Annexe 20 Cf Annexe 21 Yasmina Chapuis 32 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud sur les commentaires du module Ce qui veut dire que 144 tudiants ont r pondu aux critiques de l valuation en ligne 8 3 2 Pr sentation des r sultats Chaque semestre les r sultats sont transmis aux responsables de module La pr sentation actuelle des r sultats est souvent critiqu e par les formateurs qui trouvent cela pas agr able lire J ai donc r pondu cette demande en faisant une mise en page avec des couleurs et une criture plus grande C est donc plus lisible 8 3 3 Analyse des r sultats Pour analyser les
44. r sultats de l valuation en ligne j ai utilis le m me proc d que pour l valuation du module J ai t l charg les r ponses dans un fichier Excel que j ai mis en forme de la m me mani re J ai donc trois r sultats diff rents le tableau de fr quence les graphiques et les commentaires des tudiants En analysant en d tail la question 15 Avez vous eu des probl mes acc der au questionnaire 1 personne sur 144 a eu quelques difficult s acc der au questionnaire cause d un probl me technique ce qui repr sente qu une tr s faible minorit Q 16 Q 19 Le questionnaire est d une longueur acceptable Les questions qui concernent le module dans son ensemble sont clairement distingu es des questions qui portent sur chacune des unit s Pas d accord Plut t pas d accord t y Plut t d accord Les nonc s des questions sont clairs 8 D accord Sans avis La mise en page du questionnaire est agr able 0 0 200 400 600 800 100 0 138 personnes sur 144 trouvent la mise en page agr able ce qui repr sente un pourcentage de 95 8 Les quelques personnes qui ne sont pas d accord trouvent que les caract res sont trop gros et que le questionnaire est trop simple la question 17 la plupart des tudiants pensent que les nonc s du questionnaire sont clairs 97 2 avec quand m me quelques un d entre eux qui 58 Cf Annexe 22 59 Cf Annexes 23 24 et 25 Yasmina Chapuis 33 6
45. remplis par les tudiants a jusqu la fin du semestre avant les examens w F 8 Saisie des donn es valeurs num riques la main dans un fichier Excel pr vu cet effet En entrant les donn es un tableau de fr quence et un graphique sont g n r s automatiquement gr ce des formules entr es dans Excel 34 Cf Annexe 1 3 Cf Termes et d finitions Cf Termes et d finitions 3 Cf Termes et d finitions 38 Cf Annexe 2 Yasmina Chapuis 14 66 10 11 12 13 14 15 16 17 18 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Mise jour d un tableau de bord chaque saisie d un module termin Envoi d un ou plusieurs rappels dans le cas o l Unit Qualit n a pas re u les questionnaires de tous les modules Analyse des r sultats et cr ation selon les cas d une synth se Envoi des r sultats aux responsables de modules avec un tableau des fr quences un graphique les commentaires dactylographi s des tudiants et le cas ch ant la synth se des r sultats Si les formateurs le d sirent les r sultats peuvent tre discut s avec la conseill re la formation Les responsables de modules doivent en principe donner un retour d information sur les r sultats aux tudiants qui ont r pondu au questionnaire Si les r ponses globales des tudiants sont insatisfaisantes moins de 50 d accord une nouvelle
46. s aux responsables de modules Ces documents sont la proc dure d valuation l ch ancier du semestre en cours le canevas pour le rapport d auto valuation la liste des modules le mode d emploi pour les formateurs et trois questionnaires diff rents pr scolaire et primaire secondaire 1 secondaire 2 BP S1 S2 p dagogie sp cialis PS et s minaire d int gration INT 3 Insertion des documents en format PDF sur l Extranet un mois apr s le d but du semestre se r f rer l ch ancier g n rique 4 Cr ation du mail l attention des responsables de modules pour le lancement des valuations Ce mail doit contenir le lien l Extranet pour que les responsables de modules puissent t l charger les documents quelques informations importantes le d lai de remise des questionnaires l Unit Qualit et un num ro de t l phone et une adresse mail pour joindre une personne responsable en cas de question Envoi du mail tous les responsables de modules concern s par l valuation des enseignements 5 Pr paration et envoi des enveloppes retours Une fois les valuations achev es par les tudiants les formateurs mettent les questionnaires dans ces enveloppes retours tiquet es l adresse de l Unit Qualit qu ils d posent directement dans la bo te aux lettres interne 6 Distribution des questionnaires par les formateurs aux I tudiants dans le cadre d un cours 7 Retour des questionnaires
47. s d enseignement les m thodes p dagogiques employ es Q5 les modalit s de certification Q7 Ce qui semble moins r pondre aux attentes des tudiants entre 50 et 75 plut t favorables Sur la structure du module l articulation des unit s du module Q4 relev e aussi dans les commentaires Qualit T l 41 21 316 38 03 Fax 41 21 316 33 97 paola ricciardi joos hepl ch Yasmina Chapuis A 56 Annexes hep 15 f vrier 2011 p 2 2 Evaluation globale par unit onite M 59 des tudiants appr cient cette unit et 87 estiment qu elle leur apporte beaucoup L unit 72 des tudiants appr cient cette unit et 88 estiment qu elle leur apporte beaucoup L unit 70 des tudiants appr cient cette unit et 72 estiment qu elle leur apporte beaucoup Commentaires des tudiants El ments relev s comme des points forts min 20 des r pondants L UF RE cst particuli rement appr ci e Les raisons suivantes sont voqu es dans l ordre d croissant d importance enseignement en lien avec la pratique int ressant stimulant et clair L UF RE cst particuli rement appr ci e Les raisons suivantes sont voqu es dans l ordre d croissant d importance enseignement int ressant dynamique clair et structur Dans une moindre mesure min 10 des r pondants sont aussi relev s pour l ensemble du module les liens avec la pratique la r flexion men e sur le m tier
48. se d roule en plusieurs tapes 1 Les responsables de module donnent les questions sp cifiques qu ils aimeraient rajouter au questionnaire et les adresse mails des tudiants au service de Zollikofen 2 Les questionnaires d valuation sont envoy s aux tudiants chaque fin de module 3 Aucun rappel n est envoy aux tudiants 4 Le service envoie les r sultats environ un mois apr s la fin de chaque module Les responsables de module re oivent les r sultats sp cifiques leurs modules 5 Les responsables de module font une synth se des r sultats l attention des responsables de fili res Cette synth se permettra aussi aux responsables de module de faire un retour aux tudiants 6 Finalement les responsables de fili re font un retour au responsable de secteur Participation l IFFP le taux de retour est en g n rale assez bas Il se situe autour des 20 Cela est d au fait que les participants aux cours doivent r pondre au questionnaire pendant leur temps libre au fait que le questionnaire est trop long au fait que les questions ne sont pas toutes claires et au fait que certains responsables de module ne donne aucun retour des r sultats aux participants ce qui discr dite les valuations des enseignements Traitement des donn es et exploitation des r sultats Concernant la gestion des donn es et l analyse des r sultats seul le secteur Zollikofen s en occupe Le personnel analyse les r sult
49. sur HEP Vaud www hepl ch Excel Tableur de la suite bureautique Microsoft Office fonctionnant sous MacOS et Windows dont la premi re version est sortie en 1985 L extension des fichiers Excel est xls ou xlsx partir de la version 2007 du logiciel Dictionnaire de l informatique et d internet www dicofr com Yasmina Chapuis 54 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Extranet Zone d un intranet r seau interne une entreprise qui fonctionne sur le mod le technologique d internet d acc s restreint mais accessible de l ext rieur de l entreprise condition de disposer d un login et d un mot de passe Dictionnaire MEDIADICO www mediadico com Feedback La r troaction on utilise aussi couramment le terme anglais feedback est au sens large l action en retour d un effet sur le dispositif qui lui a donn naissance Dictionnaire Sensagent dictionnaire sensagent com Fili res HEP Les fili res de formation con oivent les plans d tudes et organisent la formation garantissent la qualit scientifiques et la pertinence professionnelle de leurs activit s tout en assurant l valuation externe des prestations reconnaissance des dipl mes Leur activit est conduite par un responsable de fili re qui s appuie sur une commission des tudes interne et met sur pied une commission consultative de r f rence externe Elles sont au nombre de cinq
50. travail car si nous sommes int ress s aux r sultats m me de l valuation Madame Chapuis s int resse elle en priorit l int r t de la mise en ligne du questionnaire d valuation du module Le temps que vous ne prenez pas la distribution des questionnaires la r colte et autre vous est donc demand pour un bref change avec elle Vous pouvez donc jeter un coup d oeil sur le questionnaire MR en le remplissant pour beurre pour vous faire une id e sur son contenu et sa pr sentation et que vous ayez ainsi mati res vous exprime sur l outil Lien du questionnaire Pour ouvrir le questionnaire vous devrez utiliser le mot de passe en minuscule Un questionnaire en ligne pourrait nous faire gagner du temps l avenir je vous remercie d avance pour votre collaboration dans le d veloppement d un tel outil Pour faire un bilan du semestre de cet automne et discuter l avenir de ce module je vous adresse un sondage doodle pour d terminer une date de rencontre En voici l adresse Au plaisir de vous lire et ou de vous revoir tout prochainement an ke 1 Yasmina Chapuis A 24 Annexes 9 Tableau des parties et questions du questionnaire S parties r ponses Les questions parties reponses 1 Informations g n rale e Date du jour e Votre fili re BP Master ES Master S1 Dipl me S2 Autre e Votre semestre d tude e 1 10 2 Evaluation du module Les
51. tudes v Yasmina Chapuis A 33 Annexes Evaluation du module 2 Evaluation du module Veuillez pour chaque question cocher la case qui correspond le mieux votre opinion personnelle Objectifs et contenu du module j jrs e pr 2 Les contenus du module permettent d atteindre les O O O O O 3 Vous deposez des amas 4 L articulation des unit s du module est pertinente O OO OO OO O 6 Vous comprenez bien l importance de ce module O O C C C our votre formation Appr ciation g n rale du module ion Plut t Plut t Oui Sans non oui avis 9 Globalement vous appr ciez ce module C C C O O Investissement lt th ihou hou 3hou 4hou 5hou gt 6h Sans lt 2h lt 3h s4h lt 5h lt 6h avis Yasmina Chapuis A4 Annexes Evaluation du module du module 3 Evaluation des unit s Unit Pas Plut t Sans concern Non e Plut t oui Oui avis par cette unit 11 1 Cette unit m a beaucoup O O O O appris 11 2 Vous appr ciez cette unit C O O O O Unit RE Pas Plut t Sans concern Non Hs Plut t oui Oui avis par cette unit 11 3 Cette unit m a beaucoup O O O 0 appris 11 4 Vous appr ciez cette unit C O O C Unit Pas Plut t Sans concern Non rpa Plut t oui Oui avis par cette unit 11 5 Cette unit m a beaucoup O O 0O O appris 11 6 Vous appr ciez cette unit C O O O O Yasmina Chapuis A 35 Annexes Evaluat
52. tudiants Vous avez particip actuellement hauteur de au questionnaire Evaluation du module BE Cette participation n est malheureusement pas suffisante pour le bon d roulement de cette phase de test C est pourquoi je me permets de vous envoyer un dernier rappel avec une prolongation du d lai au vendredi 7 janvier 2011 Voici le lien vers le questionnaire Ce lien unique est rattach ce sondage et votre adresse e mail Veuillez donc ne pas transf rer ce message Votre participation cette enqu te pr sente un triple enjeux avoir un avis repr sentatif des tudiants sur le module suivi conna tre les avantages et les inconv nient d une valuation des modules en ligne et non plus sous un format papier et contribuer mon travail de dipl me MPC J esp re que ces arguments vous convaincront de participer cette valuation En vous remerciant pour votre pr cieuse collaboration je vous adresse ch res tudiantes chers tudiants mes meilleures salutations Yasmina Chapuis Yasmina Chapuis Stagiaire MPC Unit Qualit C33 319 yasmina chapuis heplch Direct 41 21 316 06 85 Haute cole p dagogique Avenue de Cour 33 1014 Lausanne www hepl ch t envoy par erreur et que vous ne participez pas l valuation du module BP101 veuillez cliquer sur le ban ci dessous Yasmina Chapuis A 47 Annexes 16 T l chargement des r ponses sur SurveyMonkey Pour t l charger les r pons
53. un rapport Evaluation du module qui contientles parties 1 4 du questionnaire et un rapport Critique de l valuation en ligne qui contient la cinqui me partie Cela permet de faire des analyses diff rentes entre les deux rapports Si on clique sur Parcourir les r ponses on peut voir toutes les r ponses de chaque interrog Yasmina Chapuis A 48 Annexes On peut aussi T l charger des r ponses Cette option permet de t l charger un r sum de toutes les r ponses avec ou sans les r ponses ouvertes au format CSV Excel HTML XML ou encore PDF Afficher un r sum Rapport par d faut Ajouter un rapport Parcourir les r ponses D T l cha raer des DONSES Afficher l historique de t l chargement r ponses PYS Dea EE S R S Ta Recouper les r ponses Vous pouvez t l charger les r ponses que vous avez r colt es tout moment m me lorsque T l charger des vous recevez encore des r ponses Nous prenons simplement une capture instantan e de vos r ponses r ponses actuelles sans pour autant interrompre votre sondage Si vous essayez de r cup rer un t l chargement pr c dent cliquez sur Afficher l historique de t l chargement Partager des r ponses Choisissez un type de t l chargement R sum du rapport T l chargez un r sum du rapport de votre sondage que vous pourrez enregistrer o imprimer F Inclure des r ponses ouvertes O Toutes les r ponses r colt
54. vous un exemple me donner 10 Quel genre de questions avez vous dans votre questionnaire questions sur les objectifs la structure le contenu relations avec les enseignants appr ciation globale contr le des connaissances etc Quelle est la longueur combien de questions comportent le questionnaire Yasmina Chapuis A 10 Annexes Proc dure 11 0rganisez vous l valuation 1x par ann e ou plusieurs fois 12 Quelle est la proc dure Informez vous les tudiants ce sujet au pr alable Transmettez vous des documents d information aux tudiants ou aux enseignants 13 Quel est votre calendrier Quand faite vous le lancement quand rendez vous les r sultats etc 14 Effectuez vous des rappels apr s le lancement des valuations Si oui quelle fr quence qui Etudiants en ligne enseignants sur papier Participation 15 Quel est plus ou moins votre taux retour de la part des tudiants Si faible savez vous quoi il est d 16 Connaissez vous le temps approximatif utilis pour r pondre au questionnaire 17 Qui s occupe de la gestion des donn es de la saisie Qui s occupe de l analyse des r sultats Comment analysez vous ces r sultats Exploitation 18 qui s adresse ou qui adressez transmettez vous les r sultats Aux enseignants A la direction Aux tudiants votre service Autre Sous quel format le logiciel le fait tout seul Probl mes 19 Rencontrez vo
55. 00 yasmina chapuis hepl ch R pondre evaluations hepl ch Ch res tudiantes chers tudiants Comme vous le savez les valuations des enseignements ont lieu la fin de chaque ann e Cette ann e le module WE participe une phase test d une nouvelle version des questionnaires en ligne au lieu de la version habituelle sur paplT C est pourquoi je vous invite aujourd hui r pondre au questionnaire via le lien suivant http www surveymonkey com Ce lien unique est rattach ce sondage et votre adresse e mail Veuillez donc ne pas transf rer ce message Ce questionnaire ne prend pas plus d une quinzaine de minutes N oubliez pas qu il est aussi dans votre int r t d y r pondre afin de vous exprimer sur les modules auxquels vous participez Le d lai de retour est fix au jeudi 23 d cembre 2010 Et j esp re sinc rement que vous jouerez le jeu et m offrirez ainsi votre soutien pour mon travail de maturit Je suis bien s r votre disposition pour toute question compl mentaire En vous remerciant d avance pour votre pr cieuse collaboration et avec mes meilleures salutations Yasmina Chapuis Yasmina Chapuis Stagiaire MPC Unit Qualit C33 319 yasmina chapuis hepLch Direct 41 21 316 06 85 Haute cole p dagogique Avenue de Cour 33 1014 Lausanne www hepl ch t envoy par erreur et que vous ne participez pas l valuation du module BP101 veuillez cliquer sur ls Ben ci dessous
56. 2 non plut t nonblut t ou __ oui _ autres oui plut t oui non plut t non N sans autres _ N total 41 42 43 44 sans avis et non r ponses Nombre maximum de r ponses 68 68 HEP Vaud Unit Qualit Document confidentiel 12 01 11 Yasmina Chapuis A 58 Annexes 0 20 40 60 80 100 sa aare ANNE i T KE QE Re 7 Nnnn O 6 7 RC see NANNA kiaiii AAAA i ge KKKKKKKKKK ee KP NUE ee KE re atteste KR RS Non Plut t nan Plut t oui mOut Sans ave Non r ponse Yasmina Chapuis A 59 Annexes 23 Tableau de fr quence de l valuation de l outil Semestre 10A Tableau R sultats critiques xls Critiques de l valuation en ligne Q 15 questionnaire 9 0 7 99 3 se eo meeen moge au auestenore esonte o oin aise ais La mise en page du questionnaire est agr able LE see 21 5 74 3 Le 31 109 om Les nonc s des questions sont clairs CE pane ZL A 75 2 Les questions qui concernent le module dans son ensemble sont clairement distingu es des questions qui portent sur chacune des unit s LE ire 27 8 66 7 ee 13 130 Q 20 questionnaire 54 9 7 6 36 1 1 4 Taux de r ponse aux critiques 71 33 Nbr d tudiants ayant r pondu aux critique sur le nbr total d tudiants Taux de satisfaction 96 7 Moyenne des taux plut t d accord et d accord de Q 16 Q 19 Yasmina Chapuis Unit Qualit Evaluation test 09 03 11 1
57. 6 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud ne sont pas ou plut t pas d accord avec ce fait et qui trouvent que le questionnaire contient des termes compliqu s et des questions pas claires On peut remarquer qu un grand nombre d interrog s distinguent bien la diff rence entre les questions qui concernent le module et celles qui concernent les unit s 94 5 avec un peu plus de personnes qui sont plut t d accord 27 8 et plut t pas d accord 3 5 que dans les autres questions De ce fait il doit y avoir une petite incompr hension aux yeux de certains tudiants Aucun tudiant ne juge le questionnaire trop long ou pas assez 143 tudiants le trouvent bien 99 3 et une personne est sans avis On peut remarquer dans le graphique que les tudiants sont globalement satisfaits aux questions 16 19 car le graphique comporte majoritairement du vert et du violet Cela repr sente un taux de satisfaction ces questions de 96 7 ce qui est excellent Pr f rence 54 9 79 En En ligne 20 A l avenir vous mn Dans sa version papier pr f reriez remplir mm C est gal le questionnaire 36 1 52 mn Sans avis 0 20 40 60 80 Les r sultats de la question 20 par rapport la pr f rence entre le questionnaire en ligne ou papier r v lent une tr s forte pr f rence pour le questionnaire en ligne 54 9 De plus 36 1 des tudiants estiment que cela l
58. 6 12 10 2 3 en 3 Al 19 12 10 16 12 10 87 104 na nn sn A 51 Yasmina Chapuis Annexes 18 Tableau de fr quence de l valuation du module Document confidentiel 13 04 11 hep Haute cole p dagogique Qualit Avenue de Cour 33 CH 1014 Lausanne www heplch MODULE P Evaluation par les tudiants N de r pondants 151 N total 202 Taux de retour 74 8 PROFIL DES ETUDIANTS Fili re N 151 0 0 0 0 0 100 0 0 0 0 0 0 0 0 0 0 0 Semestre N 151 0 0 0 0 0 0 0 0 0 0 100 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 Heures de travail hedomadaire en dehors des heures de cours s minaire Q12 N 10 59 45 19 5 1 2 4 6 6 6 39 1 29 8 12 6 3 3 0 7 1 3 2 6 4 0 EVALUATION DES ETUDIANTS Les objectifs du module sont bien d finis dans RO 0 0 9 9 52 ET E 8 4 0 4 0 Les contenus du module permettent d atteindre les objectifs comp tences annonc e s 0 0 8 6 55 6 26 5 5 3 4 0 Q3 Vous disposez des connaissances pr alables pour suivre ce module avec profit 2 sx ia ex s on a is 2 cn 4 on Ab sam 1s 2 ss on s 2 4 on 4 on Les m thodes p dagogiques employ es dans ce module vous ont permis de r aliser des apprentissages satisfaisants 0 7 9 9 51 0 30 5 4 0 4 0 Vous comprenez bien l importance de ce MORUS POUFNE ANANG h zi Een es 41 a re D Q7 Vous savez de quoi vous devez faire preuve N 4 25 48 67 1 6 PONE 1a CAPNCAMON
59. AN DU MODE DE TRANSMISSION DU QUESTIONNAIRE SUR SURVEYMONKEY 25 LR PO A 22 ES et AU D 2 ES a OENE E NG EENE T E E ASER TEE 27 HTTP WWW ADERA CH IMAGES PNG RAPPELS PNG OR PORTER a r 37 HTTP WWW B ANGELS FR IMAGES PAGES CONCEPT JPG PORN dd no ee in 40 HTTP FORCEDEBANQUE COM WP CONTENT UPLOADS 2010 12 R C3 A9SULTATS1 JPG Yasmina Chapuis 64 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 16 2 Graphiques GRAPHIQUE 1 EVOLUTION DES REPONSES DES ETUDIANTS AU FIL DES JOURS AVEC LES RAPPELS ENVOYES ER RE ARR ET a EN RD EN US RENE RE NOR RE RE NII NE IEP R aa RIT RS aA 28 GRAPHIQUE CREE PAR CHAPUIS YASMINA 16 1 Tableaux TABLEAU 1 TABLEAU COMPARATIF DES METHODES D EEE DANS D AUTRES INSTITUTIONS mn 19 TABLEAU CREE PAR CHAPUIS YASMINA Yasmina Chapuis 65 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud ANNEXES Yasmina Chapuis 66 66 Annexes Table des annexes 1 R sum de la proc dure d valuation des enseignements par les tudiants A 2 2 Ech ancier g n rique pour l valuation des enseignements A 3 3 Proc dure pour les modules dont les r ponses globales des tudiants sont LEE AE PE ESS Li CS PR A A 4 A Questionnaire actie A sea ein ane A 5 5 Tableau des probl mes li s au questionnaire papier et am liorations possibles A 7 6 Guide d entretien pour le fonctionnemen
60. ATISATION CONTRE PAPIERS eee remettent me 1 PHOTO ET MONTAGE DE CHAPUIS YASMINA FIGURE 2 D AOL DES CDR ad sise amie coma 6 HTTP WWW SPORTSTUDIEN CH UPLOAD PRJ INSTITUTION 250X170_GEBAEUDE JPG FIGURE 3 LA ROUE DE DEMING SE a a sin en 9 HTTP UPLOAD WIKIMEDIA ORG WIKIPEDIA COMMONS 6 62 ROUEDEDEMING PNG FIGURE 4 ORGANIGRAMME DE LA BP ananas sennss ms mssn na nie E aa aa 10 HTTP WWW HEPL CH FILEADMIN PROMCOM DOCUMENTS 2011_04_ORGANIGRAMME_V19 PDF POORE a LA OR na te ns 11 HTTP 4 BP BLOGSPOT COM _I8SWYVBAR8 TMNXDI_F TI AAAAAAAAAHI QWA DDOMOS4 Ss1600 LOI C3 AIV PG FIGURE 6 EVALUER POUR EVOLUER Se aan needs sance na dans ananas a a 11 HTTP CTE UNIV SETIF DZ TESTSITE MSAADANE IMAGE EVALUER JPG FIGURE PERSONNAGE EVA TION a R aaaea aaa 14 HTTP WWW CENCOMFUT COM IMAGES PROGRAM 1 0EVALUATION GIF FIGURE O OUESTIONN ARR a cie ns ne eee reene EE ie li 16 HTTP INFGOV FILES WORDPRESS COM 2011 02 EVALUATION JPG FIGURE 9 JONGLEZ AVEC LES PROBLEMES D ORGANISATION smmnrrremmemernrenenenenenneennenenenenennennnenenenenennnnnnnes 21 HTTP WWW CROCODILUS ORG ORGANISATION IMAGES ORGANISATION GIF FIGURE 10 LE QUESTIONNAIRE DEMANDE REFLEXION mmmmnnirmirmnnnnrnenrnenrenenenneneenenennenenneneneeneneenenennnes 23 HTTP WWW LES CLES INFORMATIQUES COM IMAGES PERSO PNG FICORE 11 LOCO SURVEYMONKEY Sd aaa aa aS siens een ea a ns a 24 HTTP LISTEN2SURREY FILES WORDPRESS COM 2011 02 SURVEY MONKEY LOGO JPG FIGURE 12 CAPTURE D ECR
61. O oO oO 24 L animation de l enseignement est int ressante et dynamique E O 0 O O 25 Le Les formateur s est sont disponible s O 0 O O O 26 L enseignement laisse une place suffisante la pr sentation de points O O O O O de vue critiques par rapport la d marche 27 Le module propose une comparaison de th ories concurrentes O O O O O 28 L enseignement met en vidence les cons quences pratiques des O O O O O th ories pr sent es 29 L enseignement laisse une place suffisante aux tudiants pour qu ils O O O O O puissent exprimer et confronter leurs points de vue Investissement personnel 0 2h 2 4h 4 6h 6 8h gt 8h 30 Combien d heures hebdomadaires consacrez vous en dehors des O O O O O cours au travail li ce module plut t plut t non non oui oui sans avis 31 Vous assistez r guli rement aux cours O O O O 0o 32 Vous assistez r guli rement aux s minaires O O O O m 33 Globalement ce module vous apporte beaucoup O O O O O 34 Globalement vous appr ciez ce module O O oO O o 35 oO oO o o o 36 O oO oO oO o 37 o oO o o o Questions 41 44 destin es uniquement aux tudiant e s MS1 et MS2 41 Les liens entre l ordonnance des contenus et les comp tences o o o o o travaill es sont perceptibles 42 Le module int gre les recherches r centes 0 0 m 0 O 43 Les d marches propos es prennent en compte votre parcours O O O O O ant rieur 44 L enseignement r pond aux exigences d une formation d
62. Ss0US pour Ca x changer la mant re dont les colonnes de la feuille de Calcul seront expones VeuWez nofer qua si ias JONN ES expones d passant 256 colonnes alles seront r parties anire plusieurs fichiers Colonnes Raccourcis LD termnmez si les chox des quesbons seront rACCOUrGS ou along s pour tre Hacs dans une O plusieurs colonnes a Cellules Choix de texte actuel a Choisissez Les donn es qui apparahront dans te ulle de calcul gt Format feuille de calcul avanc e Les donn es sont tormates pour tre lues par un logiciel de tablsur mais tes colonnes et les r ponses sont organs eses a n d tre MmMeux Le 1 e t S Sp gt 35 a lues par des progiciels statistiques et d analyse avanc s VeuMWaz noter que Si las donn es export es d passant 256 colomnas eias seront r ogtes entre plusieurs fers P gt Format SPSS Les donn es sont format es pour s ouvnr avec le logiciel d analyse SPSS Format de base de donn es relationnelle Une vue de fa base de donn es relatonnelle de vos donn es et un Schier pan Cr pour Chaque taweau de base de donn es L connalssence du langage SOL Structured Query Languages est ob gatoire J ai choisi de t l charger toutes les r ponses au format Excel avec des valeurs num riques Pour effectuer cette d marche il faut tout d abord T l charger des r ponses Dans Rapport par d faut j ai cr e deux rapports car les r sultats se
63. Travail de maturit professionnelle commerciale Unit Qualit Haute cole p dagogique Yasmina Chapuis Ann e 2010 2011 Evaluation du pp la case qu correspond le mieux votre opinion personnes Hos cocnef Veuillez pour chaque question CO i TFF Sous la responsabilit de Philippe R Rovero et Paola Ricciardi Joos Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Stage de Maturit Professionnelle Commerciale Institution HEP Vaud Unit Qualit Avenue de Cour 33 1014 Lausanne E mail qualite hepl ch Responsable Monsieur Philippe R Rovero Etablissement de formation Gymnase d Auguste Piccard Chemin de Bellerive 16 Case postale 100 1000 Lausanne 6 Ouchy R pondant Monsieur Patrick Blanc P riode du stage 1 septembre 2010 au 27 juin 2011 Remise du travail final 27 mai 2011 D fense orale 20 juin 2011 Yasmina Chapuis 2 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Remerciements Mes remerciements vont au Madame Paola Ricciardi Joos pour sa pr cieuse collaboration son soutien son aide et sa relecture tout au long de mon travail Madame Aur lie Cardinaux pour ses conseils et les r ponses mes questions Responsable de module et ses formateurs pour avoir accepter que leur module s value en ligne et pour leurs entretiens Messieurs Jean Fran ois Perret Jacques O
64. a ce r sultat Votre fili re Master ES Master 51 Dipl me S2 Autre L estre d tudes Finalement la derni re question concerne le semestre d tude de l tudiant Il doit avoir le choix du 1 au 10 semestre avec un menu d roulant Le type de question est le m me que le pr c dent Deuxi me partie La deuxi me partie se nomme Evaluation du module Elle contient 10 questions qui concernent le module dans son ensemble Le type de question est pareil pour les 10 Il s agit de Matrice de choix seulement une r ponse par ligne Ce type de question permet l tudiant de choisir une r ponse des choix de r ponse pour chaque rang e de question Par exemple ici pour 7 questions sur les objectifs et le contenu du module il doit se positionner sur une chelle en 5 points Non Plut t non Plut t oui Oui ou Sans avis Question Matnce de choix seulement une r ponse par ligne Texte d la question Objectifs et contenu du module Ins rer une r ponse de Options de r ponse Choix des rang es saisissez chaque choix sur une ligne s par e 1 Les objectifs du module sont bien d finis dans les documents pr sent s 2 Les contenus du module permettent d atteindre les objectifs comp tences annonc e s 3 Vous disposez des connaissances pr alables pour suivre ce module avec profit A Pas LIGNE PE rites du module est pertinente o S Choix des colonnes
65. a permet une valuation plus cibl e et permet aussi de relever les liens entre les unit s ou les probl mes de celles ci Fait qui permet chaque formateur d am liorer son propre cours Yasmina Chapuis 38 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Evidemment la plus part des formateurs voudrait avoir des questions plus sp cifiques l unit qu ils enseignent cependant cela para t compliqu de devoir faire cela pour chaque unit de chaque module N anmoins certains souhaiteraient des questions par exemple sur la compr hension d une th matique sp cifique l unit sur les liens des unit s entre elles ou encore sur ce qu apporte l unit dans la connaissance du m tier Des questions plus sp cifiques leur apporteraient plus qu un simple indice de satisfaction comme c est le cas pr sent Actuellement les commentaires dactylographi s des tudiants est l aspect qui apporte le plus aux formateurs Il serait toutefois plus judicieux d avoir des questions ouvertes par unit s et non par module 2 formateurs pensent qu il n est pas n cessaire d approfondir les questions sur les unit s car sans cela on appellerait plus cette valuation une valuation des modules De plus certains effectuent d j des bilans avec les tudiants dans leur propre cours la question votre avis y a t il des questions indispensable qui ne figurent pas dans ce questionnaire
66. actuelle est le fait de ne pas tomber dans la routine Le taux de retour pourrait baisser par baisse d int r t de la part des tudiants De ce Yasmina Chapuis A 14 Annexes fait un message leur est envoy au d but du semestre pour les informer sur les valuations Institut F d ral des hautes tudes en Formation Professionnelle IFFP Jacques Oulevay Objectifs EHB kesmik L valuation des enseignements par les tudiants ou IUFFAP iune ms one l valuation interne des modules de formation l IFFP a t instaur e en 2005 dans le but d am liorer la qualit des cours d avoir un bilan des forces et des faiblesses des cours et de recueillir l avis des participants aux cours Elle est bas e sur la Loi f d rale sur la formation professionnelle LFPr qui demande aux prestataires de la formation professionnelle d assurer le d veloppement de la qualit L IFFP a utilis les sources du service de recherche et d veloppement bas Zollikofen pour instaurer ce syst me d valuation car une personne de ce service poss de un doctorat dans ce domaine Depuis c est ce service qui s occupe des EEE des sites de l IFFP de la Suisse allemande de la Suisse romande et de la Suisse italienne Principes L IFFP ne poss de aucune charte pr cisant les principes de l valuation dans l institution Cependant elle garantit l anonymat des r ponses des tudiants et la confidentialit des r sultats car son service d valua
67. ages etc Les options choisies qui conviennent le mieux une valuation du module sont utiliser la num rotation des pages avoir le logo HEP afficher une barre de progression en bas de la page afficher les pages termin es afficher le titre du sondage dans le sondage afficher les titres des pages dans le sondage s lectionner la langue fran aise les boutons de navigation sont Pr c pour le bouton pr c dent Suiv pour le bouton suivant et Termin pour le bouton termin utiliser une ast risque pour mettre en vidence les questions obligatoires et enfin afficher un pied de page au sondage On peut proc der ensuite la cr ation des pages avec les questions Premi re partie La premi re page se nomme Informations g n rales et contient un texte qui explique qui sert l valuation que ce questionnaire est en phase de test que l anonymat est garanti et que le questionnaire dure environ 15 minutes Dans un deuxi me temps on peut cr er les questions Pour cr er une question il faut cliquer sur Ajouter une question Appara t ensuite une page ou on peut choisir un type de question Question Choisissez un type de question Choisissez un type de question vi Choix multiple une seule r ponse Choix multiple plusieurs r ponses Commentaire Zone de r daction chelle de classement Matrice de choix seulement une r ponse par ligne Matrice de choix plusieurs r ponses p
68. aire de termes d valuation Berne OFSP RICCIARDI JOOS P 2010 Evaluation des modules par les tudiants R sultats pour les formations de base ann e acad mique 2009 2010 Lausanne HEP Vaud ROUILLER Y amp ROVERO P R 2009 L valuation des enseignements par les tudiants une composante d un dispositif de r gulation des pratiques Lausanne HEP Vaud UNINE 2005 Qualit de l enseignement Guide pour l valuation de la qualit de l enseignement Neuch tel UNINE UNITE QUALITE 2010 L Unit Qualit se pr sente Lausanne HEP Vaud VAN DEN BERGHE W 1997 L application des normes ISO 9000 dans l enseignement et la formation Interpr tation et lignes directrices dans une perspective europ enne Thessalonique CEDEFOP 15 3 Sites internet EPFL 2010 Ecole Polytechnique F d rale de Lausanne Evaluation approfondie de l enseignement Page consult e le 18 04 11 de http craft epfl ch page 44083 fr html HEIG VD 2006 2009 Haute Ecole d Ing nierie et de Gestion du Canton de Vaud HEIG VD Service de valorisation de l enseignement Page consult e le 18 04 11 de http www heig vd ch Default aspx tabid 1410 HEP BEJUNE 2000 2007 Haute cole P dagogique BEJUNE Commission permanente d valuation des parcours de formation COEV Page consult e le 18 04 11 de http www hep bejune ch institution rectorat service ac coev HES SO Haute Ecole Sp cialis e de Suisse Occi
69. alis es Plan Do Check Act gt Roue de Deming Programme Intercantonal Romand en Activit s Cr atrices et Economie Familiale P dagogie Sp cialis e Responsable de Coordination Responsable d Evaluation Responsable de fili re 50 66 RLHEP RM S1 MS1 S2 MS2 SES UER UF UFC UNIGE UNIL UNINE UQ Yasmina Chapuis Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud R glement d application de la Loi sur la Haute Ecole P dagogique Responsable de module Master of Arts of Science et dipl me pour l enseignement au degr Secondaire I Dipl me d enseignement pour le degr Secondaire II Sciences Economiques et Sociales Unit s d Enseignement et de Recherche Unit de formation Unit de Formation Continue Universit de Gen ve Universit de Lausanne Universit de Neuch tel Unit Qualit 51 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 14 Termes et d finitions Accr ditation L accr ditation est une proc dure externe un tablissement ind pendante de celui ci et de ses organismes de tutelle effectu e par des professionnels valuant l ensemble de son fonctionnement et de ses pratiques UTC www utc fr Ann e acad mique Ann e scolaire ann e universitaire Automatisation Action de rendre automatique un processus Dictionnaire Sensagent dictionnaire sensagent com Bach
70. ant de la phase 1 Plan 2 2 Pr sentation et fonctionnement de la HEP La HEP se compose de trois sortes de formations la formation de base pour les futurs enseignants la formation continue pour les professionnels et la formation postgrades pour les professionnels souhaitant avoir une formation compl mentaire certifi e Dans ces formations il y a diff rentes orientations qui se nomment fili res La formation de base comprend la fili re pr scolaire et primaire la fili re secondaire 1 la fili re secondaire 2 et la p dagogie sp cialis e La formation continue et la formation postgrades sont aussi consid r es comme des fili res Cf Termes et d finitions 1 Cf Termes et d finitions 1 Cf Termes et d finitions Cf Termes et d finitions Cf Termes et d finitions 14 Cf Termes et d finitions Cf Termes et d finitions Cf Termes et d finitions Yasmina Chapuis 9 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Dans chaque fili re il existe diff rents modules Un module se compose de plusieurs unit s de formation Enfin dans ces unit s les tudiants assistent soit des cours soit des s minaires Par exemple le module BP113 Education physique didactique 1 est compos de deux unit s BP113 1 Savoirs disciplinaires en ducation physique qui est un cours et BP113 2 Enseignement des habilet s motrices 1 qui est un
71. antage dans ce mode de fonctionnement Et ces int r ts sont en plus de a pr sent autant pour les formateurs que pour les tudiants et l Unit Qualit Les diff rents avantages d une automatisation de la d marche soulign s sont dans un premier temps la rapidit de la r ception des r sultats C est plus pertinent car les formateurs peuvent pr voir des changements pour le prochain semestre lorsqu ils sont encore dans la dynamique du module et les r sultats sont donc plus facile traiter Puis pour les tudiants c est plus facile de r pondre d effacer les erreurs c est plus ludique et ils ont la possibilit de r fl chir et de r pondre au questionnaire quand ils en ont envie Il y a aussi Yasmina Chapuis 41 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud beaucoup moins d influence car les tudiants r pondent sans doute individuellement C est plus rapide plus cologique et le gain de temps dans la saisie des donn es pour l Unit Qualit est norme Le responsable de module est soulag d une grande surcharge de travail Avec le format papier les tudiants peuvent rendre le questionnaire de deux fa on diff rentes alors qu en ligne cela arrive directement la personne qui traite les donn es Dans la version papier on ne peut pas faire de rappel aux tudiants or c est important de faire des rappels pour avoir le plus de chance d avoir des r ponses et pour
72. ante sp cifiquement en 3 me ann e BP Un questionnaires sur les horaires serait aussi utile beaucoup d l ves ne sont Plus vite fait et plus agr able pas satisfaits Merci En ligne cela permet de r pondre hors cours et d tre plus r ceptif aux Pour chaque unite il pourrait tre interessant pour vous de r colter une valuation sur la clart de ce que les profs attendent des rt si les supports de L utilit du module pour enseigner des Dans sa version papier dans de plus brefs d lais enfants en 2 2 Autant sur papier que sur internet a paenes ne change vraiment rien dans le C est gal temps mis parti mon avis une ou deux questions concernant les enseignants seraient judicieuses Ce serait pour eux un bon j Soyons colos moyen d avoir un feed back sur leur cours J en ai marre de tous ces trucs en ligne Alors laissez nous nos Non je pense que ce questionnaire est bien Dans sa version pa questionnaires papier fait Une question sur les enseignants car comme on l a vu le r le de l enseignant a un impact important il n y a que le module En ligne Non je trouve il y a tout qui est important A l avenir I serait surtout bon de pouvoir valuer l ensemble des il faudrait aussi valuer le module apr s ele sa des UF la fin des l examen ge he Sry pouvoir juger l utilit et la clart En tigne colo Yasmina Chapuis Unit Qualit Evaluation test 13 05 11 2 5 Yasmina Chapuis A 63
73. apier et plait globalement tous Le but du projet tait de mettre en place un syst me informatis de l EEE qui permettait de r duire le temps qui est prit d habitude pour la distribution et le d pouillement des questionnaires et de rendre la d marche plus simple Ce projet a t effectu avec succes En effet apr s avoir fait un test sur 202 tudiants en leur envoyant le lien du questionnaire cr e avec le programme SurveyMonkey le taux de retour de la part des tudiants a t une grande surprise De plus tudiants et formateurs semblent pour la plupart pr f rer une valuation en ligne plut t que papier Par ailleurs en ayant eu l avis des tudiants formateurs et des autres institutions ce travail m a permis de faire une proposition pour une future valuation des enseignements par les tudiants en ligne Cependant certains th mes m riteraient d tre explor s dans l avenir pour ne pas n gliger certains aspects de l EEE Notamment la m canisation de la d marche ne fera t elle pas perdre le c t humain et remplacer la t che de l homme par celui de la machine Ne faudra t il pas d velopper un moyen d automatiser sans que l tudiant et le personnel ne soient confront s qu leur machine En outre jusqu pr sent les questionnaires d valuation taient apr s environ 2 ans mis en boites d archives et descendus au local d archives Avec le syst me en ligne comment se fera l archivage des questionnaires
74. ar ligne Matrice de menus d roulants Zone de texte unique Plusieurs zones de texte Zones de texte num riques Texte descriptif image Informations d mographiques tats Unis Informations d mographiques international nsultez nos exemples de questions Yasmina Chapuis A 27 Annexes Si on ne sait pas quel type de question on a faire on peut cliquer sur exemples de questions Un exemple sera alors donn pour chaque type de question La premi re question concerne la date du jour o l tudiant se connectera sur le questionnaire Il faut donc choisir le type Date et ou heure On a apr s le choix du format de la date de l heure du texte de la question des zones de texte de trier l ordre des zones de texte d exiger une r ponse la question de la taille et de l emplacement des questions Voici les options que j ai choisies pour cette question Question Date et ou heure Choisir le format de la date de l heure Afficher uniquement la date Format jj MM AAAA Texte de la question Date Options de r ponse Choix des zones de texte S lectionnez un choix diter Date du jour diter Lorsqu une date ou une heure non valide est saisis afficher ce message d erreur Veuillez saisir une date valide 1 Trier rendre al atoire ou modifier l ordre des zones de texte Facultatif Sp cfiez un ordre fixe o variabile pour vos
75. ateurs pour leur communiquer les r sultats et avoir un bref change leur sujet d Je prends contact avec les formateurs et le responsable de module pour convenir d un rendez vous dans le but de r colter les critiques sur ce nouvel outil d valuation 3 Accord du responsable de module pour participer la phase test Le nom du module et du responsable de module ne seront pas d voil s dans ce travail dans le but de respecter la confidentialit des r sultats du module 4 D cision de toutes les choses techniques avant le lancement de l valuation Yasmina Chapuis 21 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Notamment il faut d cider de la date laquelle je dois intervenir dans la salle de cours quelle heure si je vais seule ou accompagn e du responsable de module ou de la conseill re la formation si le formateur pr sent m introduit ou si j aborde directement la question etc 5 Proposition de communication aux formateurs Toutes les informations du point 2 ont t ajout es dans une proposition de communication aux formateurs C est dire que j ai cr e un mail l attention des formateurs afin que ces personnes aient toutes les informations n cessaires Le responsable de module envoie le mail que j ai pr par pour lui aux formateurs pour que ceux ci puissent prendre au s rieux le projet Ce mode de fonctionnement permet aussi de soulage
76. ats et les envoie ensuite l IPPF Lausanne Yasmina Chapuis A 16 Annexes Les responsables de module re oivent les r sultats de leurs modules Les responsables de fili re re oivent une synth se des r sultats Enfin le responsable de secteur re oit un retour de chaque fili re Probl mes actuels li s l valuation Il y a 6 probl mes principaux dans la d marche d valuation La premi re est le fait qu une valuation des enseignements par les tudiants n est pas suffisante pour am liorer la qualit d un cours C est pourquoi l IFFP veut mettre en place une valuation des prestations des enseignants par leur employeur Le deuxi me probl me est d au fait que le questionnaire comporte trop de question ce qui d motive les participants aux cours r pondre Puis le taux de retour est bas car ces derniers sont pour la plupart des adultes ayant une famille et ayant d autres choses faire en dehors de leurs cours pour r pondre un questionnaire pendant leur temps libre Ensuite vu que le personnel qui cr e le questionnaire se situe en Suisse allemande il doit traduire les questionnaires en fran ais Cette traduction est souvent mauvaise et certaines questions ne sont pas compr hensibles Dans un cinqui me temps les enseignants trouvent que les r sultats arrivent trop tard ce qui ne leur permet pas d am liorer leur cours tout de suite Enfin les responsables de module ne font pas toujours de retour aux
77. avantages moins de risque de perte des documents plus de temps pour r fl chir aux questions aspect cologique et conomique pour ceux qui ne Lee pas au Aucune id e Oui propos de des profs qui enseignent Il devrait y avoir plus de question concernant les diff rents modules et non pas que des questions g n rales Parfois un module peut tre tr s bien alors qu un autre Il est plus facile de remplir le pas du tout et l on n a pas trop la questionnaire sur feuille en d but ou possibilit de le dire justifier notre avis fin du cours cela evite d oublier de le On peut seulement dire si on a aime ou La version en ligne est plus cologique Les valuations devraient porter par et un gain de temps pour les intervenants vu qu ils ne sont pas tous En ligne d pouillages gaux a m est gal mais je pense qu en ligne cela permet d conomiser du Une appr ciation des supports utilises dans C est gal papier les cours I est plus facile de repondre en ligne on conomise du papier le traitement des r ponses est simplifi e pour les examinateurs et ceci peut galement se faire en dehors des cours pas de perte de temps consacr r pondre aux questionnaires durant des le ons Le questionnaire me parait tres bien comme i il est Merci Yasmina Chapuis Unit Qualit Evaluation test 13 05 11 3 5 Yasmina Chapuis A 64 Annexes Semestre 10A Commentaires Resultats
78. chor de r ponse VJ Exiger une r ponse pour cette question Faculatif La personne interrog e doit r pondre minimum 411 choix de date et heure Si aucune r ponse n est fournie la question afficher ce message d erreur 1 Taille et emplacement des questions Modifiez la taille et l emplacement par d faut de cette question Dans la partie Exiger une r ponse pour cette question on peut voir que le message d erreur contient du texte HTML En faite dans le questionnaire lorsque l on veut faire appara tre du texte en gros en gras en italique ou en couleur on doit utiliser du langage HTML Ici lt blink gt lt blink gt sert faire clignoter le texte Lorsqu un tudiant n aura pas r pondu cette question et voudra passer la page suivante le texte Cette question n cessite une r ponse clignotera et donc sera plus visible pour l tudiant Yasmina Chapuis A 28 Annexes Une fois les options choisies on peut cliquer sur Enregistrer les modifications La question ressemblera alors cela Date JJ MM AAAA Date du jour IN IN La deuxi me question concerne la fili re de l tudiant Il doit avoir le choix entre BP Master ES Master S1 Dipl me S2 et Autres sous forme de liste d roulante avec un champ de texte pour pr ciser la r ponse de l tudiant qui r pondra Autre Pour se faire il faut choisir Choix multiple une seule r ponse comme type de question Puis sur Af
79. critiques xls A l avenir vous pr fereriez votre avis y a t il d autres questions qui remplir le questionnaire en devraient figurer dans ce questionnaire afin ligne dans sa version que le module soit valu correctement Si oui lesquelles Tant que le questionnaire est bien pr sent qu il soit en ligne ou dans je pense que les parties sur les unit s des une version papier cela m est gal modules devraient etre plus developpees La pr paration la certification les activit s plus sp cifiquement en s minaires tudiants r pondront plus facilement fun peu court et pourrait comporter d autres que sur l ordinateur questions C est plus simple on est mon avis le questionnaire est assez En ligne tranquillement chez nous complet Si on le fait en ligne chez nous a nous vite de prendre du temps sur les p riodes de cours et c est plus agr able de savoir qu on peut Je pense que vous devriez poser chaque r pondre en ayant tout le temps qu on question pour chaque UF car les cours sont veut notre disposition Si on le fait diff rents et donc ne peuvent pas tre en cours on vraiment que 15 min value tous dans la m me question Il est plus vite rempli en ligne et fait perdre moins de temps pendant les cours Non je le trouve tres bien ainsi Pas de temps d enseignement perdu lors des cours Pas de temps perdu je n ai pas de questions qui me viennent pour les profs transmettre les mais
80. d effectuer cette d marche l UNINE s est bas sur plusieurs sources Notamment elle a repris certaines choses qui se faisaient l EPFL elle a fait une tude sur le contenu du questionnaire par rapport ce qui se fait en Suisse et l tranger et elle s est bas e sur des livres comme L valuation de l enseignement universitaire d H l ne Poissant Principes L UNINE n a pas de charte mais un guide g n ral D velopper et mettre en valeur la qualit une exigence partag e et un document Evaluation des cours Pr sentation de la d marche qui ont certains principes comme le respect de la confidentialit qui est en principe respect car aucun r sultat n est communiqu ailleurs si aucune demande n a t faite Chaque enseignant devrait valuer un cours par an mais aucun suivi n est effectu sur la p riodicit L anonymat de l tudiant est garanti par l outil utilis Population Yasmina Chapuis A 12 Annexes Jusqu en 2008 tous les cours de l UNINE taient valu s chaque semestre Mais employ s enseignants et tudiants ont t lass de cette mani re de faire Le secteur Qualit tait donc charg de trouver un syst me plus simple pr sent chaque enseignant est cens faire valu au moins un cours par ann e acad mique sauf dans certains cas peut choisir le cours annuel ou les deux cours qu il souhaite faire valuer et la date laquelle il veut les faire valuer Actuellement
81. dait de remplis les les oeufs dans le m me panier et lorsque la questions avec un asterix question concerne le module il est dur de Pourtant ces questions r pondre car plusieurs UFs et parfois des etaient remplies Je n ai s minaire ou des grands cours varient donc pas pu le finir tres gros norm ment selon le prof Parfois les nonc s n taient pas claires on ne comprenait pas la question ou la question tait ambiqu ou a plusieurs sens U Peut tre un peu trop simpliste Les questions sont parfois peu claires A l avenir vous pr f reriez votre avis y a t il d autres questions qui remplir le questionnaire en devraient figurer dans ce questionnaire afin ligne dans sa version que le module soit valu correctement Si pap i oui lesquelles Je trouve que certaine fois c est quand m me plus facile de recevolr directement une feuille remplir plut t que de devoir allumer un ordi consulter nos mails pour ensuite pouvoir r pondre une questionnaire C est pour cela que ma pr f rence irait plus du c t du papier mais si l on devait nous m me Imprimer le questionnaire dans ce cas l je Une disctinction entre la mati re et le prof Dans sa version pr f rerals un questionnaire en ligne ne Car cela me permet de noter le commentaire que je veux la ou je le veux Siil y avait la possibilit de Avez vous deja eu des experiences noter un commentaire pour chaque professionnelles au n
82. dentale HES SO FAQ Evaluation de l enseignement Page consult e le 18 04 11 de http www hes so ch CMS default asp 1D 1584 Yasmina Chapuis 62 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud IFFP Institut f d ral des hautes tudes en formation professionnelle IFFP valuation interne des modules de formation de l IFFP Page consult e le 18 04 11 de http www ehb schweiz ch fr rechercheetdeveloppement evaluation Pages valuationinter nedesmodulesdeformationdelIFFP aspx SMART 2000 2006 Syst me M thodologique d Aide la R alisation de Tests valuation des enseignements Aspect scientifique Page consult e le 18 04 11 de http www smart ulg ac be smartweb missions evalens_scientifique php UNIL Universit de Lausanne UNIL Centre de soutien l enseignement CSE Evaluation des enseignements par les tudiant e s Page consult e le 18 04 11 de http www unil ch cse page28490 html UNINE Universit de Neuch tel UNINE La d marche d valuation des cours Page consult e le 18 04 11 de http www2 unine ch qualite page 5720_fr html WIKIPEDIA Wikipedia Roue de Deming Page consult e le 18 04 11 de http fr wikipedia org wiki Roue_de_Deming Yasmina Chapuis 63 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 16 Table des illustrations 16 1 Figures FIGURE AUTOM
83. des indicateurs qualit sous forme de feux de signalisation qui permettent par exemple de dire si un enseignant se situe plut t bien ou plut t mal par rapport aux autres cours de sa branche Probl mes actuels li s l valuation L UNIGE rencontre quelques probl mes par rapport sa phase pilote Le taux de r ponse a diminu de 80 50 car les tudiants ne sont plus contraints de r pondre La base de donn es institutionnelle n est pas jour et il est difficile de pourvoir avoir toutes les informations n cessaires pour chaque cours et chaque enseignants L impression des questionnaires n est pas toujours respect e par les enseignants Par exemple ils n impriment pas en recto verso Cela pose probl me car lorsque les questionnaires sont mal imprim s le scanner peut ne pas reconna tre le questionnaire ou alors les donn es se retrouvent mal informatis es Enfin il y a aussi un souci de communication entre les diff rents individus car la d marche est en phase pilote ce qui veut dire qu elle a chang et certaines personnes ont de la peine comprendre ce changement Yasmina Chapuis A 23 Annexes 8 Mail de communication aux formateurs De lt mail du responsable de module gt Objet intormation valuation du module Date cembre 2010 10 39 31 GMT 01 00 A lt mail des formateurs gt Cc lt yasmina chapuis hepl ch gt Ch res et chers coll gues Comme vous le savez chaque ann e ont l
84. e suite de signe ASCII dans laquelle sont inclues les commandes sp ciales concernant le formatage des pages la police de caract res et les multim dia Dictionnaire de l informatique et d internet www dicofr com IS Academia Syst me central de gestion des tudiants et des tudes UNINE www2 unine ch Mandat Contrat par lequel une personne le mandant charge une autre personne le mandataire de la repr senter pour accomplir en son nom des actes juridiques comme la vente ou la location La procuration est l crit par lequel est donn le mandat Dictionnaire Sensagent dictionnaire sensagent com Master of Arts of Science et dipl me pour l enseignement au degr Secondaire 1 HEP La formation permet de contribuer au d veloppement personnel intellectuel et social des adolescent e s en enseignant une deux ou trois disciplines aux degr s 7 9 dans toutes les voies et aux degr s 5 et 6 du canton de Vaud HEP Vaud www hepl ch Module Unit th matique ind pendante et structur e pour laquelle le volume en cr dits ECTS voir d finition les objectifs de formation et les crit res d appr ciation sont fix s Un module est compos d une ou de plusieurs unit s apprentissage et ou d enseignement Un programme d tudes une orientation ou une option hors programme d tudes comprend un ou plusieurs modules la HEP la notation d un module se d compose en 3 parties La premi re partie est l abr viat
85. e deuxi me rappel sera en principe fait apr s la p riode de f tes pour ne pas importuner les tudiants Le premier rappel sera envoy le 21 d cembre 2010 avec Rappels d lai au 23 d cembre 2010 et le deuxi me le 3 janvier 2011 avec dernier d lai au 7 janvier 2011 Apr s avoir envoy tous les rappels on peut se rendre compte quel point ils sont n cessaires J ai pr par un graphique page suivante qui montre l volution des r ponses des tudiants dans le temps et avec les rappels envoy s pour qu on puisse voir l utilit de ceux ci 50 Cf Annexe 14 l Cf Annexe 15 Yasmina Chapuis 27 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Graphique 1 Evolution des r ponses des tudiants au fil des jours avec les rappels envoy s Evolution des r ponses des tudiants Yasmina Chapuis 28 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud On peut voir dans le graphique que les tudiants ont commenc r pondre au questionnaire le 16 12 10 lors du lancement de l valuation On a donc le plus grand nombre d tudiant qui a r pondu apr s le premier mail qui leur a t envoy Ensuite on a un deuxi me pic le 19 12 10 ce qui m a tr s tonn car c est un dimanche Je n aurais jamais pens que 12 tudiants puissent r
86. e donn es 8 1 1 Probl mes de SurveyMonkey et t l chargement des r ponses Apr s avoir fait de nombreux essais pour voir toutes les fonctionnalit s d analyse de SurveyMonkey je me suis rendue compte certains aspects sont tr s int ressants mais ne conviennent pas totalement aux analyses d une valuation du module J ai remarqu notamment que SurveyMonkey ne fait pas de graphique regroupant toutes les r ponses comme on le faisait jusqu maintenant Il fait des graphiques que par question Par exemple Clart mm Pas d accord mm Plut t pas d accord mm Plut t d accord ma D accord M Sans avis 17 Les nonc s des questions sont clairs 0 20 40 60 80 100 120 ne fait aucun calcul statistique par exemple le pourcentage par question et par modalit de r ponse des tudiants qui ont r pondu et de ceux qui n ont pas r pondu J ai donc d cid qu il tait plus simple d utiliser un fichier Excel de saisie que j aurais mis en forme ma sauce Il suffira juste de copier coller toutes les donn es valeurs num riques dans ce fichier et le tableau de fr quence et les graphiques seront g n r s automatiquement gr ce aux formules entr es dans Excel L annexe 16 expose la m thode pour le t l chargement des r ponses Yasmina Chapuis 30 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 8 1 2 Mise en forme dans Excel s agit maintenant de me
87. e l valuation en ligne La phase test d un nouveau dispositif d valuation a n cessit une importante tape de planification Avec l aide de la conseill re la formation nous avons donc envisag un sc nario qui r pondrait au mieux aux besoins que demande une valuation informatis e 5 1 Sc nario pr vu avec la conseill re la formation Acc s aux tudiants et au terrain 1 Choix du module valuer Le choix du module valuer a t d cid avec la conseill re la formation Les crit res de choix ont t le nombre lev d l ves dans un module l ouverture d esprit du responsable de module l exp rience les modules contenant plusieurs unit s de formation UF et des UF contenant des cours et des s minaires 2 Contact avec le responsable de module choisi pour lui pr senter en quelques mots mon travail les d marches pr vues et pour lui demander de participer la phase test Envoi d un premier mail de contact au responsable de module pour me pr senter pr senter le projet et demander un premier rendez vous Au rendez vous explication de toute la d marche C est dire a J interviens au d but de l un des derniers cours du semestre pour pr senter le projet donner des consignes et motiver les tudiants prendre le temps de r pondre au questionnaire b Une analyse est faite par l UQ et retourn e au responsable de module c Le responsable de module doit contacter les form
88. e l UQ Soit qu on automatise la d marche A 9 Annexes 6 Guide d entretien pour le fonctionnement de l EEE en externe Objectifs Comment s appelle exactement le nom de l valuation que vous effectuez Quelles sont vos r f rences utilis es pour effectuer cette valuation Quels sont les objectifs de cette valuation Quelle a t la motivation la mettre en place Dans quel contexte est elle apparue Existe il une loi concernant l valuation de l enseignement 4 Avez vous une charte ou des principes concernant l valuation Sont ils toujours respect s Population 5 Evaluez vous tous les cours ou un choix est il fait Si choix quels sont les crit res de s lection 6 Quel est approximativement le nombre de module cours valu chaque session Choix de l outil 7 Organisez vous l valuation de l enseignement par les tudiants en ligne ou sur papier Pourquoi Qu est ce qui vous a pouss le faire de cette fa on Pour ceux qui utilisent le support papier n avez vous jamais pens effectuer une valuation en ligne Avez vous d j fait des essais Pour ceux qui effectuent une valuation en ligne n avez vous jamais pens effectuer une valuation sur papier 8 Quel est l outil utilis Quel en est le fonctionnement Etc 9 Les questionnaires sont ils les m mes pour chaque cours ou y a t il des questions sp cifiques chaque cours plusieurs mod les de questionnaire Avez
89. e module avec profit E E E non L articulation des unit s du module est pertinente E 0 g plut t non plut t oui g Les m thodes p dagogiques employ es dans ce module vous ont permis de r aliser EE gt i oui des apprentissages satisfaisants sans avis S Vous comprenez bien l importance de ce module pour votre formation BE ES fi E non r p Vous savez de quoi vous devez faire preuve pour la certification E RE YC Eval test Eva_module_ JE _ 10A xiIs 1 2 Yasmina Chapuis A 53 hep Haute cole p dagogique Qualit Avenue de Cour 33 CH 1014 Lausanne ww hepl ch Document confidentiel Annexes 13 04 11 R ponses des tudiants aux questions 11 1 11 6 N 151 0 10 20 L unit BP101 1 m a beaucoup appris Q11 1 N z Vous appr ciez l unit BP101 1 m 3 L unit BP101 2 m a beaucoup appris 3 Vous appr ciez l unit BP101 2 lt 3 L unit BP101 3 m a beaucoup appris w Vous appr ciez l unit BP101 3 YC Eval test Yasmina Chapuis 30 40 50 OR 90 100 Enon plutot non plut t oui oui sans avis E pas concern non r p 2 2 A 54 Annexes 20 Commentaires des tudiants de l valuation du module page 1 Document confidentiel 13 04 11 hep Haute cole p dagogique Qualit Avenue de Cour 33 CH 1014 Lausanne www hepl ch RE re points forts du module aspects du module am liorer suggest
90. e y avoir divers avis et apports au sein du groupe Les membres ont t choisis soit en fonction de leur lien directe avec l valuation donc rattach l Unit Qualit soit en fonction de leur connaissance du dossier donc ayant d j particip des groupes pr c dent sur l valuation comme le GA Qualit ou le GT Proc dure ou soit en fonction de leur int r t manifest pour le sujet Le GT Dispositif a depuis son mandat d j produit un rapport de synth se interm diaire qui contient les diff rentes tudes et tests entrepris pr c demment Par exemple en allant voir dans d autres coles comment s effectue les valuations de l enseignement et en testant diff rents questionnaires La prochaine tape est la journ e du GT Dispositif qui sera priori organis e en 2011 Le projet d une valuation en ligne s inscrit tout fait dans le cadre des travaux effectu s par le GT Dispositif 31 Cf Termes et d finitions 32 Cf Termes et d finitions 3 Cf Termes et d finitions Yasmina Chapuis 13 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 3 Etat actuel de la question 3 1 Proc dure d valuation actuelle La proc dure actuelle concernant l valuation des enseignements par les tudiants se d roule en plusieurs tapes 1 Validation de la liste des modules par la Direction de la formation 2 Pr paration des documents d informations destin
91. ects du module am liorer Remarques pr cisions et suggestions compl mentaires sur le module 5 Critiques des tudiants par rapport l valuation en ligne e Avez vous eu des probl mes e Oui non a Acc s acc der au questionnaire e La mise en page du b Mise en page pag questionnaire est agr able e Les nonc s des questions c Clart q Pas d accord sont clairs plut t pas e Les questions qui concernent le d accord plut t module dans son ensemble dd d Distinction sont clairement distingu es des de nE questions qui portent sur NE chacune des unit s questionnaire longueur acceptable e l avenir vous pr f reriez En ligne dans sa remplir le questionnaire version papier c est gal sans avis f Pr f rence e votre avis y a t il d autres questions qui devraient figurer dans ce questionnaire afin que le module soit valu correctement Si oui lesquelles Yasmina Chapuis A 26 Annexes 10 Elaboration des parties du questionnaire sur SurveyMonkey Dans un premier temps il faut cr er un nouveau sondage et noter comme titre Evaluation du module BA 104 Introduction la profession Il faut choisir comme apparence du sondage le th me HEP Il contient les couleurs de la HEP et son logo Une fois fait il faut choisir les options de conception du sondage Il y a des options sur la num rotation des pages sur le logo sur le titre du sondage et des p
92. eignants D apr s la loi sur les universit s les enseignements doivent tre valu s Le secteur Formation et Evaluation FormEv de l UNIGE s est appuy sur diff rentes sources pour pourvoir mener bien cette valuation Il a notamment utilis la m thode du benchmarking et s est renseigner sur ce qu il se faisait l EPFL et au CEFRES Centre de formation et de recherche en enseignement sup rieur universit Montr al Il s est aussi bas sur des ouvrages de E W Brascamp d H l ne Poissant et de Huguette Bernier Il a surtout explor des r f rences en mati re d valuation en ligne et de taux de r ponse Principes L UNIGE dispose d une directive qui a pour but de sp cifier les recommandations et bases minimales en mati re d valuation des enseignements et d un plan strat gique L UNIGE a certains principes comme le fait que l anonymat est totalement garantit l enseignant peut choisir dans quelle mesure ses r sultats sont confidentiels un retour des r sultats doit tre fait aux tudiants et il y a une grande transparence quit et uniformisation Population L valuation des enseignements l UNIGE a lieu par semestre Tous les enseignements doivent tre valu une p riodicit variable selon les formations La formation de base doit tre valu les enseignements au niveau Bachelor sont valu s au moins tous les 3 ans et les enseignements au niveau 7 Cf Termes et d finitions 8 Cf
93. eignement Elle construit une vision prospective du d veloppement des fili res de formation planifie les ressources n cessaires et veille la formation continue du corps enseignant La Direction de la formation s appuie sur le service acad mique pour r gler les affaires traitant des tudes des admissions des tudiants et des stages ainsi que sur l unit de la planification HEP Vaud www hepl ch Dispositif M canisme Plan suivant lequel une chose a t tablie Dictionnaire Sensagent dictionnaire sensagent com Cr dits ECTS Le Syst me Europ en de Transfert et d Accumulation de Cr dits est un syst me de points d velopp par l Union europ enne qui a pour but de faciliter la lecture et la comparaison des programmes d tudes des diff rents pays europ ens Le sigle ECTS abr viation du terme anglais European Credits Transfer System est le terme le plus couramment employ pour des raisons pratiques Yasmina Chapuis 53 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Il fait partie du Processus de Bologne Wikipedia fr wikipedia org EduQua Certificat suisse de qualit pour les institutions de formation continue Le Certificat eduQua qualifie une bonne institution de formation continue assure et d veloppe la qualit dans l institution de formation continue et offre plus de transparence pour les consommateurs et les consommatrices EduQua www edu
94. elor of arts en enseignement pour les degr s pr scolaire et primaire HEP La formation permet d acqu rir les comp tences n cessaires l enseignement dans les classes des huit premi res ann es de la scolarit HEP Vaud www hepl ch Benchmarking Technique de gestion et de marketing consistant comparer son entreprise une ou plusieurs autres qui font r f rence dans un domaine sp cifique Dictionnaire de TV5Monde dictionnaire tv5 org Cercle vertueux Un cercle vertueux est un ensemble de cause effet qui am liore le syst me entier C est l inverse d un cercle vicieux Dictionnaire Sensagent dictionnaire sensagent com Collecteur Un collecteur est l outil qui g n re le lien vers un sondage et qui en d termine le moyen de diffusion SurveyMonkey fr surveymonkey net Comit de Direction HEP Le Comit de direction se compose d un recteur ainsi que d un directeur de la formation et directeur de l administration qui lui sont subordonn s Le Comit de direction met en uvre la strat gie de d veloppement d finie par le D partement de la formation de la jeunesse et de la culture Il assure le respect des dispositions l gales et positionne la HEP Vaud dans le paysage suisse et europ en des Hautes coles Le Comit de direction pilote par ailleurs les missions de la HEP Vaud au niveau op rationnel en assurant la coh rence de leur mise en uvre et une r partition optimale des ressources entre ell
95. ent la proc dure excellente ils ont cependant des am liorations proposer I faudrait par exemple expliquer mieux la d marche d valuation dans le mail qu on envoie aux tudiants car ils ne comprennent pas forc ment le sens de l valuation et leur expliquer dans quelle mesure c est anonyme car ils peuvent avoir peur que l Unit Qualit puisse les identifier ce qui pourrait provoquer un malaise Un formateur pense qu il faudrait adapter les questions en fonction des besoins des formateurs Un autre pense qu un groupe de travail constitu d tudiants pour le questionnaire serait une bonne id e Il y a aussi la question du retour donn aux tudiants qui a t relev e Un des formateurs pense qu il faudrait que l Unit Qualit v rifie le retour que doivent donner les formateurs car ils sont rares le faire et ce retour permet de montrer aux tudiants que leur avis compte De mani re g n rale tous les formateurs trouvent la proc dure tr s int ressante et compl te et pensent qu elle irait tout fait pour une future automatisation de la d marche 10 2 Contenu du questionnaire Tout d abord tous les enseignants consid rent int ressant le fait que le questionnaire comporte une partie sur l valuation du module et une partie sur l valuation des unit s car en premier lieu cela rend le questionnaire riche et complet Puis il est important que la distinction entre unit s et modules soit faite Ensuite cel
96. er les questionnaires papiers au lieu de donner un questionnaire remplir en ligne Les tudiants et formateurs ont donn des id es assez int ressantes qu il serait int ressant d tudier et par la suite peut tre de les d velopper De m me que le fonctionnement dans certaines institutions D apr s les r sultats obtenus j en viens faire une nouvelle proposition de d marche que pourra explorer l Unit Qualit par la suite Proc dure Tout d abord l id e de mettre des affiches qui feraient de la publicit pour les EEE et qui permettraient aux tudiants d anticiper ces valuations est une bonne id e Tout comme les affiches actuelle sur le dispositif de signalement les affiches des valuations auraient un logo et une phrase accrocheuse qui motiveraient les tudiants r pondre Dans un deuxi me temps vient la cr ation du questionnaire EvasSys le programme de cr ation de questionnaire d valuation des enseignements qu utilise l UNIGE a l air tr s int ressant puisqu il est fait expr s pour les EEE Il serait bien de contacter le fournisseur et de pouvoir tester le programme pendant 30 jours pour voir s il correspondrait au besoin de l UQ Yasmina Chapuis 46 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Une fois le questionnaire pr t il faut lancer l valuation Il sera surement difficile de pouvoir passer dans chaque salle de classe pour pr senter l
97. es HEP Vaud www hepl ch Yasmina Chapuis 52 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Cours Enseignement dans une mati re particuli re Dictionnaire Sensagent dictionnaire sensagent com CSV Format de fichier de donn es cod en ASCII norme de codage de 128 caract res alphanum riques sur 7 bits le s parateur de donn e tant la virgule Dictionnaire de l informatique et d internet www dicofr com Dipl me d enseignement pour le degr Secondaire 2 HEP Cette fili re est ouverte aux porteurs d un Master acad mique ou d un dipl me quivalent dans une deux branches d tudes constituant la base scientifique des disciplines correspondantes d finies dans le R glement sur la Reconnaissance des certificats de maturit gymnasiale RRM Il permet d enseigner l cole de culture g n rale l cole de maturit et l cole professionnelle HEP Vaud www hepl ch Direction de l administration HEP La Direction de l administration assure la gestion des ressources humaines financi res et techniques de la HEP Vaud Elle tablit sous l autorit du Comit de direction les principes et les r gles de l organisation administrative de l cole et apporte son support au fonctionnement du Comit de direction HEP Vaud www hepl ch Direction de la Formation HEP La Direction de la formation coordonne la conduite et l organisation de l ens
98. es il faut cliquer sur Analysez les r sultats en haut droite D Cancavet in haitia R colie d s r p rse Anatya z les r sultats Afficher un r sum Rapport par d faut Ajouter un rapport Parcourir les r ponses Nombre total de personnes ayant d but le sondage 151 Filtrer les r ponses Nombre total de personnes ayant termin le sondage 144 95 4 Recouper les r ponses ionnez une page afficher ci dessous ou affichez toutes les pages T l charger des r ponses 1 informations g n rales TET Partager des r ponses PAGE INFORMATIONS G N RALES 1 Date T l charger Nombre Pourcentage de r ponses Sa r ponses Date du jour OE a Afficher les r ponses 100 0 151 Questions r pondues 151 Question pass es 0 2 Votre fili re Cr er un tableau T l charger Nombre Pourcentage de de r ponses i r ponses Bp en A 100 0 151 On se retrouve sur une page o on a un r sum des r ponses de chaque question Depuis l on a plusieurs choix On peut t l charger ou cr er un tableau pour chaque question L inconv nient de ce moyen est que l on peut t l charger les r ponses seulement par question ce qui ici ne me sert pas grand chose sauf si je suis int ress e tout particuli rement une question On peut aussi ajouter un rapport bouton vert Cette option permet de cr er un rapport seulement avec les questions qui nous int resse Par exemple j ai cr
99. es Pilloud Coordinateur Bernard Baumberger Primaire Mich le Cusinay Acteurs Syst mes et Organisation de Formation Philippe Losego Secondaire 1 Pierre Curchod Didactiques de l art et de la technologie Denis Leuba Secondaire 2 Marc Honsberger D veloppement de l enfant l adulte Pierre Andr Doudin P dagogie sp cialis e Enseignement apprentissage et valuation Daniel Martin Jacques Pilloud Didactiques de l ducation physique et sportive Alain Mermoud Postgrade Sarah Fouassier Didactiques du fran ais No l Cordonier Interactions sociales Mauro Amiguet Didactiques des langues et cultures Rosanna Margonis Pasinetti Didactiques des math matiques et sciences de la nature St phane Clivaz M dia et TIC dans l enseignement et la formation Bernard Baumberger P dagogie et psychologie musicales K m l Afsin P dagogie sp cialis e Viviane Guerdan Didactiques des sciences humaines Philippe Hertig Cf Termes et d finitions 8 Cf Termes et d finitions Cf Termes et d finitions Cf Termes et d finitions Cf Termes et d finitions 2 Cf Termes et d finitions 3 Cf Termes et d finitions 24 Cf Termes et d finitions Yasmina Chapuis 10 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 2 3 L valuation de l enseignement la HEP 2 3 1 Loi sur l valuation de l enseignement L valuation des enseignements la HEP repose sur plusieurs articles de lois Dans
100. et le d veloppement des prestations centr es sur les besoins de l enseignement et de l ducation Ce deuxi me objectif s inscrit tout fait dans le cadre d une am lioration continue de la qualit de l enseignement dans une institution Afin que le pilotage la r gulation et la qualit d un enseignement puissent tre men bien il est important que l institution prenne en compte l avis des tudiants qui cet enseignement est consacr C est pour cette raison que les universit s hautes coles et autres institutions de formation ont mis sur pied l valuation des enseignements par les tudiants EEE Cette forme d valuation est un moyen tr s utilis pr sent dans les tablissements pour permettre un diagnostic pertinent de l enseignement donn et pour d terminer d ventuelles mesures prendre pour assurer et ventuellement am liorer la qualit de celui Ci Au fil du temps et avec l avanc e de la technologie l valuation sur papier dispara t petit petit pour laisser place des dispositifs informatis s Ce moyen permet de rendre la proc dure d valuation passablement plus simple et fait perdre moins de temps aux enseignants et aux employ s qui s occupent d valuer les enseignements En 2004 la Haute cole p dagogique du canton de Vaud HEP a pos une demande de reconnaissance des titres aupr s de la Conf rence suisse des directeurs cantonaux de l instruction publique CDIP
101. eur est gal On peut donc dire que cette partie des tudiants pourrait accepter facilement une valuation en ligne ce qui repr sente au total un pourcentage de 91 d tudiants qui adh reraient une automatisation de la d marche Les avis divergent Ceux qui pr f rent une valuation en ligne trouvent que c est beaucoup plus simple rapide pratique et agr able que cela repr sente une grande conomie de papier point fort pour l cologie qu il y a un gain de temps Yasmina Chapuis 34 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud pour le d pouillement des r ponses et que le traitement des donn es est de ce fait simplifi Les tudiants ont l occasion de r pondre chez eux ce qui leur permet de prendre le temps qu ils veulent pour r pondre et de plus ils ne r pondent pas lors d un cours important avant les examens comme c est le cas avec les valuations papier Les enseignants ne perdent plus de temps devoir distribuer les questionnaires en classe et les ramasser Enfin avec le syst me informatis les questionnaires sont envoy s directement la personne concern e et ne passent pas entre les mains d un enseignant ce qui est rassurant pour le respect de la confidentialit l oppos ceux qui pr f reraient rester au mode papier jugent qu il est plus facile de remplir les questionnaire directement sur place que l on peut noter les commentaires o
102. ficher les choix sous la forme d un menu d roulant Question Choix multiple une seule r ponse Choisissez un format d affichage Afficher les choix sous la forme d un menu d roulant Texte de la question Votre fili re ins rer une r ponse de Options de reponse Options de r ponse saisissez chaque choix sur une ligne s par e BE Master ES Master 5S1 Dipl me 52 Autre ins rer une r ponse de _ Trier rendre al atoire ou changer l ordre des choix Facultatif Sn ciez un ordre fixe o variable pour vos choix de r pons J Exiger une r ponse pour cette question Faoulatif Si aucune r ponse n est fournie la question afficher ce message d erreur J Ajouter Autre ou un champ de commentaires Facultatif tiquette du champ Autre veuillez pr ciser Ta le du champ une seule ligne de texte 4 50 caract res de large e L4 Ld Validation ne pas valider le texte de commentaire 4 bd i En faire un choix de r ponse Ce qui change par rapport la question pr c dente est qu il y a plusieurs choix de r ponse Ceux ci sont not s sur une ligne s par e pour que le logiciel puisse faire la distinction Il ne faut pas oublier de cocher la case Ajouter Autre ou un Yasmina Chapuis A 29 Annexes champ de commentaires pour que l tudiant puisse pr ciser sa fili re Enfin cliquer sur Enregistrer les modifications Cela donner
103. forts et aux points faibles du module Proc dure La proc dure d valuation des enseignements par les tudiants est la suivante La direction de l cole d signe un responsable d valuation REV 2 La direction le responsable de fili re RF le REV et le responsable de la coordination de l enseignement RCE d cident du p rim tre de l valuation 3 Le REV pr vient l AGE du p rim tre de l valuation et envoie un message aux enseignants pour les pr venir de l valuation et pour leur demander s ils d sirent une valuation sp cifique et aux tudiants pour les pr venir qu ils auront la possibilit d valuer les enseignements L valuation la HEG GE est construite sur la base du volontariat ce qui veut dire que les Yasmina Chapuis A 18 Annexes tudiants ne sont pas oblig s de r pondre L valuation a g n ralement lieu environ 3 semaines avant les examens Le REV envoie la demande AGE 5 AGE en coordination avec le REV s occupe de pr parer le questionnaire et d ouvrir la session 6 L tudiant se connecte sur AGE avec son login choisit les cours qu il veut valuer et remplit les questionnaires dans les 10 jours laiss s pour r pondre 7 Un rappel est envoy aux tudiants la moiti de la p riode laiss e pour r pondre Le syst me ne permet pas d envoyer de rappel seulement ceux qui n ont pas r pondu mais tous les tudiants 8 Apr s les 10 jours pass s AGE
104. gt L on a un aper u de l entier du message Mais on ne voit pas comment est afficher l HTML dans le message Alors on peut s envoyer un message test soi m me pour voir quoi ressemblera le message final en cliquant sur message de test et en notant l adresse laquelle on veut envoy le test Yasmina Chapuis A 42 Annexes Le message re u ressemblera cela De yasmina chapuis hepl ch Objet Questionnaire d valuation d un module en ligne pour mon travail MPC Date 26 novembre 2010 15 50 54 GMT 01 00 evaluations hepl ch R pondre amp yasmina chapuis hepl ch Bonjour tous Ayant remarqu certaines choses qui n allaient pas dans ce questionnaire et ayant effectu des modifications je vous propose de recommencer l tape en remplissant pour blanc avant le 1er d cembre Voici le lien vers le sondage http www surveymonkey com s aspx sm QFJFi83WuLDLU 2f0wS5gAtyucu79u9blhxWAQuIS 2fdGsQ 3d Ce lien unique est rattach ce sondage et votre adresse e mail Veuillez ne pas transf rer ce message Vous pouvez donc effacer l ancien message car l adresse du questionnaire n est plus valide Si vous voyez des choses qui pourraient tre am lior es vos remarques sont videmment les bienvenues Merci d avance pour votre attention Bonne fin de journ e Yasmina Chapuis Remarque S vous ne souhaitez plus recevoir d e malls de notre part veuillez cliquer sur le ben ci dessous Vous serez auto
105. i permettra de prendre de plus grandes d cisions 10 6 Autres types de questions J ai demand l avis des formateurs concernant le fait qu il puisse y avoir des diff rences de jugements de la part des tudiants suivant s ils r pondent en ligne ou sur papier 1 formateurs pensent que si on utilise le m me questionnaire dans les deux cas il ne voit pas pourquoi il devrait y avoir une diff rence de jugement son encontre 5 formateurs pensent que les r sultats doivent tre diff rents Les arguments donn s sont les suivants quand les tudiants r pondent en ligne ils peuvent se sentir plus anonyme ils feront plus de critiques et seront donc plus vrai Lorsque le questionnaire est rempli sur papier la fin d un cours il n y a pas les m mes disponibilit s la maison ils ont le temps de r fl chir et il y a moins d influence de la part d une l ve ou d un enseignant Sur papier ils auront peut tre tendance valuer le dernier cours auquel ils sont plut t que la totalit du module Par contre avec le questionnaire papier on peut voir plus ou moins combien de temps il va nous prendre et on est dans le contexte de l valuation De plus en cours les tudiants peuvent s changer des id es Le 100 des formateurs pr f reraient sans h siter que les valuations des enseignements soient faites en ligne par la suite Pour eux il y a beaucoup plus d int r t le faire en ligne Ils ne voient presque aucun d sav
106. ieue les valuations des enseignements Pour cette ann e j ai donn mon accord pour que le module MR participe une phase test d une nouvelle version des questionnaires en ligne au lieu de la version habituelle sur papier Nous serons ainsi lib r s du temps que nous prenions chaque semestre pour la distribution de ces questionnaires la r colte etc Madame Yasmina Chapuis stagiaire l Unit Qualit en est l organisatrice yasmina chapuis hepl ch 021 316 06 85 Elle effectuera toutes les d marches n cessaires cette valuation en ligne de sa mise en oeuvre son analyse L ensemble de son travail sera par ailleurs l objet de son dipl me de maturit professionnelle commerciale Ce test se d roulera en plusieurs tapes 1 Madame Chapuis interviendra au d but du cours p du jeudi 16 d cembre afin de pr senter son projet de donner des consignes et de motiver les tudiants prendre le temps de r pondre au questionnaire 2 Une analyse sera ensuite faite par l Unit Qualit et me sera retourn e d ici le 18 f vrier au plus tard 3 Je vous contacterai d ici fin f vrier pour vous communiquer ces r sultats et d avoir un change avec vous leur sujet 4 Enfin Madame Chapuis prendra contact fin f vrier avec chacun de vous pour convenir d un rendez vous d but mars Le but de cette s ance sera pour elle de r colter vos critiques sur ce nouvel outil d valuation Cet change sera central son
107. igne 6 3 Elaboration du questionnaire sur SurveyMonkey Le plus important arrive enfin Il faut laborer le questionnaire sur SurveyMonkey avec ce que je connais de cet outil L annexe 10 d crit toute la d marche d laboration du questionnaire du choix du type de questions et des param tres la mise en page du questionnaire Une fois toutes les pages cr es le questionnaire en ligne est termin L annexe 11 donne un aper u de ce dernier 6 4 Mode de transmission du questionnaire Une fois la conception du questionnaire termin e on peut passer au choix de la mani re dont on souhaite envoyer le questionnaire afin de r colter les r ponses Pour ce faire il faut cr er un collecteur Le type de ce collecteur d terminera comment sera distribu le questionnaire Il faut d abord cliquer sur R coltez des r ponses gt Ajouter un collecteur Une nouvelle page s ouvre o il faut choisir le type de collecteur que l on veut 48 Cf Termes et d finitions Yasmina Chapuis 24 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Comment souhaitez vous r colter vos r ponses Cr ez un lien envoyer dans un message lectronique ou placer sur une page Web La fa on la plus simple et la plus rapide de r colter vos r ponses Nous g n rons un lien pour votre sondage qu il vous suffit de copier coller Chargez vos propres courriers lectroniques et nous enverrons une
108. ilis un type Matrice de choix seulement une r ponse par ligne chaque fois s par ment car les questions n ont pas les m mes modalit s de r ponses Le type de la derni re question est Commentaires zone de r daction Enfin je rajoute la fin des remerciements et un paragraphe qui contient mes coordonn es au cas o un tudiant aurait besoin d un renseignement Yasmina Chapuis A 32 Annexes 11 Questionnaire en ligne Evaluation du module du module D 1 Informations g n rales Les r sultats de cette valuation permettront aux enseignants de conna tre la fa on dont les tudiants valuent leurs enseignements et de trouver le cas ch ant des possibilit s d am lioration Ces r sultats seront aussi int gr s dans une synth se globale adress e la Direction de la formation et au Comit de direction de la HEP Le remplacement de la version papier du questionnaire d valuation par ce questionnaire en ligne est actuellement en phase de test L Unit Qualit est donc autant int ress e conna tre votre appr ciation du module que votre opinion sur ce nouveau mode d valuation Merci de r pondre aux questions jusqu la fin y compris les questions 15 21 Donnez librement votre opinion vos r ponses seront trait es de mani re anonyme Le questionnaire dure environ 15 minutes Date JJ MM AAAA Date du jour URSE Votre fili re Autre veuillez pr ciser Votre semestre d
109. ion continue est l objectif vis court et moyen terme La deuxi me mission situ e au niveau op rationnel consiste assurer des d marches qualit l ensemble des prestations offertes par l institution XML Anglais eXtensible Markup Language Meta langage extensible d riv de SGML permettant de structurer des donn es Dictionnaire de l informatique et d internet www dicofr com Yasmina Chapuis 60 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 15 Bibliographie 15 1 Ouvrages POISSANT H 1996 L valuation de l enseignement universitaire Montr al Les Editions Logiques ROMAINVILLE M amp COGGI C 2009 L valuation de l enseignement par les tudiants approches critiques et pratiques innovantes Bruxelles De Boeck 15 2 Documents Loi 419 11 sur la Haute cole p dagogique LHEP du 12 d cembre 2007 R glement 419 11 1 d application de la loi sur la Haute cole p dagogique RLHEP du 3 juin 2009 Loi 412 10 f d rale sur la formation professionnelle LFPr du 13 d cembre 2002 Loi 414 71 f d rale sur les hautes coles sp cialis es LHES du 6 octobre 1995 Loi 414 20 f d rale sur l aide aux universit s et la coop ration dans le domaine des hautes coles du 8 octobre 1999 CHEMSI G et al 2010 L valuation des enseignements et des formations par les tudiants utilisation des technologies de
110. ion de la fili re du module la deuxi me partie est l ann e laquelle se trouve l tudiant et la troisi me partie est la num rotation du module Exemple le module BP301 Il est consacr aux tudiants de la fili re primaire BP qui sont en 3 ann e d tude 3 C est le premier module consacr ce public 01 Clarification et d finition de notions centrales Rapport adopt par l assembl e pl ni re de la CRUS PDF Yasmina Chapuis 57 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Anglais Portable Document Format Format de fichier cr par Adobe permettant de visualises et d imprimer un fichier sur n importe quelle plateforme via l outil Acrobat Reader Dans la cr ation des pages Web par exemple il compl te utilement le langage HTML qui ne restitue pas l int gralit des formats et des styles qu il peut s av rer n cessaire d utiliser Dictionnaire de l informatique et d internet www dicofr com Dipl me d enseignement sp cialis Master of Arts pour l enseignement sp cialis HEP La formation vise former des professionnels capables de favoriser le d veloppement et lint gration d enfants et d adolescents en situation de handicap Cette situation peut tre li e un probl me de handicap mental physique ou sensoriel ou des troubles de la personnalit du comportement du langage ou d apprentissage La formation cherche d
111. ion du module du module a 4 Commentaires sur le module 12 Quels sont selon vous les points forts du module al El 13 Quels sont selon vous les aspects du module am liorer a n O O 14 Remarques pr cisions et suggestions compl mentaires sur le module al El Yasmina Chapuis A 36 Annexes Evaluation du module du module E 5 Vos critiques par rapport l valuation en ligne La HEP tudie les possibilit s d une g n ralisation de l valuation des modules par un questionnaire en ligne comme celui ci C est pourquoi votre avis sur ce questionnaire nous int resse beaucoup Merci donc de r pondre encore ces quelques questions compl mentaires Acc s Oui Non Si oui merci de pr ciser votre r ponse Mise en page Pas PU Plutot pas d accord GEEET d accord Si vous n tes pas d accord merci de pr ciser votre r ponse A D accord pese x Clart Plut t Pas Plut t D accon Sans d accord d accosd d accord avis Si vous n tes pas d accord merci de pr ciser votre r ponse A hg Distinction Plut t Pint je Fr cs par d accord Yasmina Chapuis A 37 Annexes Evaluation du module du module D Longueur du questionnaire Pas Plut t Plut t TERREN Sans d accord d accord avis d accord Dans sa En ligne version C est gal Sans avis O Merci de pr ciser votre r ponse 21 votre
112. ions compl mentaires Les l ments interactifs ainsi Mieux mettre en avant que le cours devenir l importance du module par observateur qui selon moi rapport la certification nous ont beaucoup apport s Le point fort de ce module est Je ne vois pas le lien entre les 3 II faudrait s lectionner les le s minaire sur l observation unit s de formation De plus sujets les plus importants S minaire tr s stimulant et durant le grand cours le temps aborder durant le grand cours int ressant pour approfondir un sujet n est pas suffisant Les liens entre les diff rentes Je suis globalement satisfaite UF sont pertinents Les Je n ai pas eu de surprise car s minaires sont tr s les informations pour ce module enrichissants car ils nous sont claires permettent d appliquer la th orie et surtout d approndir les bases Devenir Observateur Les 6 mots EE a L aspect tr s personnel et le travail sur soi de l U 3 ainsi que l U 1 le cours de RE pendant lequel j ai beaucoup fournit beaucoup activit s et parfois l on parle d informations La certification trop de notre vie personnelle l examen Qu il soit oral est une bonne chose sachant que des parties du module sont personnelles on peut parler de nous Le cours SSP est tr s tre plus clair dans l annonce int ressant M des lectures des s minaires est tr s int ressante et explique tr s bien Le cours sur l observation est tr s int ressant dans
113. issage en s apuvant sur les concepts linquistiques et initier la conception de situations d enseignement apprentissage appuy es sur les 4 concepts linquistiques et didactiques construits 4 maitriser le geste de l criture scripte et cursive et en conna tre des aspects culturels 5 et d veloppementaux 5 6 7 Structure du module __non plut t nonblut t ou _ oui autres oui plut t oui non plut t non N sans autres _ N total 8 La proportion entre les cours et les s minaires est ad quate 8 68 68 9 Les liens entre les cours et s minaire sont clairs et suffisants 9 10 La quantit du travail personnel demand est ad quate 10 11 L valuation formative vous permet de progresser 11 12 Les modalit s d examen sont explicites 12 13 Le module est alobalement coh rent 13 Contenu du module oui plut t oui non plut t non N sans autres _ N total 14 Le module est conforme au descriptif du plan d tude 14 68 15 Le module stimule votre r flexion 15 16 Les lectures conseill es sont utiles 16 17 Le module est utile la pratique d enseignant e 17 Place du module non _ plut t nonblut t ou _ oui autres oui plut t oui non plut t non N sans autres _ N total 18 Vous disposiez des connaissances pr alables n cessaires pour suivre ce module avec profit 18 0 16 40 38 6 83 17 19 Le module est bien int gr e dans le cursus de formation 19 0 1 34 60 4 98 2 20 Le
114. iveau de question m me en ligne en ligne l enseignement avant d int grer la HEP et de Dans sa version pa de suivre ce module C est plus rapide en ligne mals peut tre plus efficace sur version papler dans le cours car tout le monde est contraint de Plus cologique en ligne mais si on le donne par papler j y r pondrais quand m me Vu la simplicit pour r pondre au questionnaire en ligne et en pensant l conomie de papier qui peut se Les formateurs r pondent ils elles vos faire je ne peux que souhaiter questions de fa on appropri e cours l avenir ce genre de questionnaire i Yasmina Chapuis Unit Qualit Evaluation test 13 05 11 1 5 Yasmina Chapuis A 62 Annexes Semestre 10A Commentaires Resultats critiques xls A l avenir vous pr f reriez votre avis y a t il d autres questions qui remplir le questionnaire en devraient figurer dans ce questionnaire afin ligne dans sa version que le module soit valu correctement Si gal sans avis Merci de preciser votre r ponse oui lesquelles La somme de travail en dehors des cours est elle minime suffisante trop importante Le temps qu on passe travailler n est pas repr sentatif du temps n cessaire ou que l on aimerait passer travailler sur le module Cette question d ordre generale devrait se poser chaque ann e pour l ensemble de la formation En g n ral la somme de travail est beaucoup trop import
115. l impression dans la distribution Formateurs des questionnaires en classe et dans la r colte distribuer les questionnaires etc techniques Unit Qualit r ponses or ce n est normalement pas autoris d interdire plus d une r ponse par question Les enseignants ont l autorisation de rajouter trois questions suppl mentaires s ils le souhaitent Mais Probl mes certains en rajoutent plus que trois ce qui pose techniques Unit Qualit probl me dans le fichier de saisie qu utilise l UQ Les tudiants qui veulent s exprimer avec plus de d tails pour certaines questions crivent des choses dans les marges L Unit Qualit ne prend pas en compte ce qui est crit dans la marge mais Mettre disposition une ligne pour s exprimer Probl mes Unit Qualit seulement ce qui est crit dans les trois questions pour chaque question ou alors automatiser la techniques Etudiants ouvertes d marche Certains enseignants impriment des questionnaires sur deux pages sans utiliser la fonction recto Par l automatisation de la d marche les verso et sans agrafes ce qui fait qu une partie des formateurs n ont plus besoin d imprimer de Probl mes questionnaires n a plus de 1 re ou 2 me page et questionnaires et ce probl me n existera donc techniques Unit Qualit d autres sont totalement dans le d sordre plus Par l automatisation de la d marche les Probl mes Difficult relire l criture des tudiants dans les critures des tudiants seron
116. l information et de la communication pour la conception et l exploitation de ces valuations Vers la mise en place d un dispositif informatis d EEE dans la Facult des sciences Ben M sik EpiNet Revue lectronique de l EPI Enseignement Public amp Informatique N 124 20p Document consult le 15 04 2011 de http www epi asso fr revue articles a1004b htm COEV 2008 Guide pour l valuation des enseignements par les tudiants la HEP BEJUNE Porrentruy HEP Bejune CONSEIL D ETAT 2007 Loi sur la Haute cole p dagogique LHEP Lausanne HEP Vaud CONSEIL D ETAT 2009 R glement d application de la loi du 12 d cembre 2007 sur la Haute cole p dagogique RLHEP Lausanne HEP Vaud CRUS 2006 Clarification et d finition de notions centrales Rapport adopt par l assembl e pl ni re de la CRUS les 11 12 mai 2006 Berne CRUS GT Dispositif d valuation des enseignements 2010 Rapport interm diaire du GT Yasmina Chapuis 61 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Dispositif d valuation des enseignements Lausanne HEP Vaud HEP VAUD 2006 Demande de reconnaissance CDIP Lausanne HEP Vaud LAUPER BERTRAND E SCHNOZ SCHMID T P amp BALZER L 2011 Evaluation en ligne ou hors ligne de la formation continue dans les hautes coles Le choix du support influe t il sur la qualit des donn es Paris IFFP OFSP 2005 Gloss
117. la mesure o il est utile plus tard YC Eval test Eva_module_ HE 10A xis 1 17 Yasmina Chapuis A 55 Annexes 21 Synth se des r sultats de l valuation du module hep Haute cole p dagogique Qualit Avenue de Cour 33 CH 1014 Lausanne www hepl ch Synth se des r sultats l attention de esponsaple qu moauIe Lausanne le 15 f vrier 2011 Questionnaire d valuation de l enseignement compte rendu pour le module ME Taux de retour le questionnaire a t rempli par 75 des participants 151 201 La majorit des tudiants 69 consacrent entre 1 et pr s de 3 heures de travail hebdomadaire ce module en plus des heures de cours s minaire Q10 Globalement une majorit 80 soit 121 151 des tudiants appr cient ce module Q9 et une majorit 72 soit 108 151 estiment qu il leur apporte beaucoup Q8 La moyenne des r ponses plut t favorables ces deux questions est de 76 Ce qui semble bien r pondre aux attentes des tudiants gt 75 plut t favorables Sur la structure du module la d finition des objectifs du module dans les documents pr sent s Q1 Sur le contenu du module l ad quation des contenus du module pour atteindre les objectifs comp tences annonc e s Q2 et l importance per ue du module pour la formation Q6 Sur la place du module dans la formation les connaissances pr alables pour suivre le module avec profit Q3 Sur les modalit
118. la mise en page et de la clart des questions et pr f rent une automatisation future de la d marche d valuation Le 91 des tudiants et le 100 des formateurs pourraient accepter un syst me en ligne Ils sont de plus d accord sur plusieurs avantages Ils trouvent l valuation en ligne plus rapide plus facile et plus cologique Il y a un grand gain de temps pour le d pouillement des r ponses Les r sultats sont plus faciles traiter Les tudiants peuvent r pondre aux questionnaires chez eux ce qui leur donne la possibilit de r fl chir et de r pondre quand ils le veulent Pour les formateurs il n y a plus de perte de temps distribuer les questionnaires Et ces derniers sont envoy s directement la personne concern e Is sont aussi en accord sur quelques d savantages Pour eux pas tous les tudiants ont forc ment un acc s un ordinateur ou internet ce qui rend la d marche de r pondre assez difficile C est moins efficace que la version papier car il est facile de s y soustraire Certaines personnes pr f reraient r pondre un questionnaire pendant un cours plut t que l inverse Enfin les tudiants ont besoin de voir la personne qui ils rendent les questionnaires pour garder un c t humain et pour poser des questions s ils en ont besoin Yasmina Chapuis 45 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Vu l attitude positive des formate
119. le domaine l gislatif il y a la Loi sur la Haute cole p dagogique LHEP L article 10 sur l valuation des activit s de la HEP stipule que la HEP proc de aux valuations requises par les dispositions li es la reconnaissance des dipl mes et l accr ditation Le r sultat de ces valuations est transmis au d partement Dans le domaine r glementaire il y a le R glement d application de la loi sur la Haute cole p dagogique RLHEP L article 6 sur la surveillance de l Etat pr cise que le Comit de direction adresse chaque ann e au d partement un rapport de gestion portant sur l exercice coul Ce rapport contient notamment des informations sur a le suivi du plan strat gique pluriannueF b les d veloppements et l valuation des activit s de la HEP c la gestion du personnel L article 7 sur l valuation des activit s de la HEP dit que le Comit de direction proc de l valuation des activit s de la HEP l aide d indicateurs fond s sur des crit res quantitatifs et qualitatifs 2 3 2 D finition de l EEE L valuation des enseignements par les tudiants commun ment appel e EEE est une proc dure qui vise prendre en compte le point de vue et les besoins en Evaluer pour voluer formation des tudiants valoriser l enseignement et a apporter un diagnostic sur un enseignement ce qui permettra aux formateurs d tre soutenus dans leur soucis d am liorer leur en
120. leurs yeux Il serait int ressant de reposer cette question dans une future valuation en ligne pour mieux comprendre le probl me Il serait aussi int ressant de rajouter des remarques chaque question afin que les tudiants puissent s exprimer chaque question et non pas seulement aux commentaires De m me que les tudiants les formateurs ont trouv cette d marche d automatisation efficace et int ressante et esp rent que les EEE se feront dans un avenir proche de mani re informatis e Concernant la proc dure ils pensent qu il est important de continuer pr senter les valuations de vive voix ou bien d ins rer une vid o dans le mail envoy aux tudiants dans le but de garder un c t humain la d marche Il est important d expliquer le but de l valuation dans ce mail et d expliquer dans quelle mesure c est anonyme pour r conforter les tudiants Afin d anticiper les valuations des affiches pourraient tre placard es dans la HEP comme publicit des valuations Cela rendrait la d marche un peu plus pr sente et les tudiants comprendraient mieux son importance Chaque formateur voudrait que les questions du questionnaire soient adapt es leur besoin Il serait int ressant d tudier une possibilit de faire des questions communes et des questions que peuvent choisir les formateurs Pour la plupart ils pr f reraient que deux valuations diff rentes soient entreprises une valuation avant les examen
121. lu correctement Si 5 5 Yasmina Chapuis A 66 Annexes 26 Questionnaire pour r colter le point de vue des formateurs Proc dure 1 Qu avez vous pens de la proc dure Le fait que j aie inform les tudiants de vive voix pendant un cours des rappels que j ai envoy etc 2 Trouvez vous emb tant le fait de devoir valuer le module la fin du semestre juste avant les examens Si oui quand serait ce pertinent et pratique pour vous 3 Avez vous des id es pour am liorer encore cette proc dure Contenu 4 Trouvez vous int ressant le fait qu il y aie une partie sur l valuation des unit s et une autre sur le module 5 Est ce que vous auriez aim que d autres questions plus sp cifique votre unit soit pos es 6 votre avis y a t il des questions indispensable qui ne figurent pas dans ce questionnaire 7 Lorsque vous avez consult le questionnaire via le mail que je vous ai envoy comment avez vous trouv la mise en page Et la clart des questions Mise en forme des r sultats 8 Qu avez vous pens de la nouvelle mise en forme des r sultats Vous semble t elle plus ou moins agr able plus ou moins claire 9 Est ce que tout vous a t utile Utilisation des r sultats dans le module 10 Comment les r sultats vous ont ils t transmis 11 Comment s est pass l change avec l quipe 12 La confidentialit de l valuation du module est elle respect e 13 Comment les
122. matiquement retir de notre bste de dstnpution nito www suneymonkey com oniout as0x Une fois qu on est satisfait du r sultat on peut proc der l envoi du message tous les membres de l UQ R sum du message Retour la liste des messages Planification de livraison des messages Planifier une livraison L envoi du message ma pas encore t planifi Quand ce message doit il tre envoy O Envoyer le message une date ult rieure 1 a 2011 03 22 oi 00 21 arr format de la date 8888 mm4 heure bas e sur l heure de l E Envoyer le message imm diatement le message sera envoy dans 5 minutes Annuler Envoyer le message Cliquer sur Planifier une livraison gt Envoyer le message imm diatement gt Envoyer le message Le message sera ensuite inscrit dans une liste des Messages envoy s planifi s Yasmina Chapuis A 43 Annexes Messages envoy s planifi s Objet du message Date d envoi Envoy s bhvhgcj Envoy le 7 d cembre 2010 14 31 1 Essai rappel Questionnaire d valuation d un module en resp r d valuation d un module en ligne pour mon Envoy le 26 novembre 2010 16 02 5 Je fais aussi des essais pour les rappels afin d tre s r de la bonne fonctionnalit du syst me Yasmina Chapuis A 44 Annexes 13 Mail de lancement de l valuation De evaluations hepl ch Objet Lancement de l valuation Date 14 d cembre 2010 16 28 42 GMT 01
123. me d valuation des enseignements par les tudiants la HEP Vaud 13 Lexique des abr viations 10A 10P BP CD CDIP CEFRES CUS DF ECTS EEE EPFL FORDIF FormEv GA Qualit GT Dispositif GT Proc dure HEG GE HEP Vaud HES SO IFFP INT LAU LFPr LHEP LHES PDCA PIRACEF PS RCE REV RF Yasmina Chapuis Automne 2010 Printemps 2010 Bachelor of arts en enseignement pour les degr s pr scolaire et primaire Comit de Direction Conf rence suisse des Directeurs de l Instruction Publique Centre de Formation et de Recherche en Enseignement Sup rieur Conf rence Universitaire Suisse Direction de la Formation Syst me Europ en de Transfert et d Accumulation de Cr dits Evaluation des Enseignements par les Etudiants Ecole Polytechnique F d rale de Lausanne Formation en Direction d institution de Formation Secteur Formation et Evaluation la HEG GE Groupe d Accompagnement Qualit Groupe de Travail Dispositif d valuation des enseignements Groupe de Travail Proc dure d valuation des enseignements Haute Ecole de Gestion de Gen ve Haute Ecole P dagogique du canton de Vaud Haute Ecole Sp cialis de Suisse Occidentale L Institut F d rale des hautes tudes en Formation Professionnelle S minaire d int gration Loi sur l Aide aux Universit s Loi F d rale sur la formation Professionnelle Loi sur la Haute Ecole P dagogique Loi f d rale sur les Hautes Ecoles Sp ci
124. mposent donc d environ 6 10 questions L institution a choisi ce mode de fonctionnement car une valuation des enseignements est en premier lieu utile l enseignant pour lui permettre d avoir un feed back sur son cours Il est donc logique qu il puisse contribuer la cr ation du questionnaire Dans la liste des 30 questions choix il y a des questions relatives au contenu et l organisation du cours aux travaux demand s et aux activit s d tude attendues et l apport du cours pour les tudiants Proc dure Yasmina Chapuis A 13 Annexes Les diff rentes tapes de la proc dure d valuation de l UNINE peuvent tre num r es comme suit 1 Au d but du semestre le secteur Qualit envoie un mail tous les enseignants dans le but de leur rappeler la d marche leur rappeler qu ils doivent valuer un cours par ann e et pour leur donner le lien au questionnaire qui comporte les 30 choix de questions qui leur permettra d laborer leur questionnaire 2 la date convenue par l enseignant ce dernier pr vient les l ves qu ils vont recevoir un mail pour valuer le cours et qu il est important de remplir le questionnaire afin de trouver des solutions d am lioration 3 Apr s une semaine un rappel est envoy aux tudiants avec un dernier d lai de 3 jours 4 Apr s les 3 jours le secteur Qualit cl t l valuation des cours 5 Le programme Qualtrics permet de cr er des r sum s de rapport avec
125. n de la qualit l assurance qualit et l am lioration de la qualit Des approches et des m thodes d valuation sont la base de nombreux syst mes de gestion de la qualit D autre part un syst me de gestion de la qualit peut tre l objet d une valuation Glossaire d valuation de l OFSP 2005 GA Qualit HEP Le Groupe d Accompagnement Qualit tait charg d tablir une premi re appr ciation de la proc dure d valuation choisie et de faire des propositions de questionnaires Rapport interm diaire du GT Dispositif GT Dispositif HEP Le Groupe de Travail Dispositif d valuation des enseignements est charg de formuler des propositions de d veloppement de l actuel dispositif d valuation des enseignements certifi s formations initiales et non certifi s formations postgrades et formation continue Rapport interm diaire du GT Dispositif GT Proc dure HEP Yasmina Chapuis 56 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Le Groupe de Travail Proc dure d valuation tait charg de r valuer la proc dure d valuation utilis e de l optimiser de mani re renforcer son r le de r gulation des formations et d augmenter la cr dibilit et la fiabilit des r sultats Rapport interm diaire du GT Dispositif HTML Anglais HyperText Mark up Language Langage de description des pages Web d riv du SGML Il est compos d un
126. n des questionnaires pendant un cours Le fait que le questionnaire actuel n value que le module et non les unit s peut provoquer une frustration chez l l ve qui ne voit pas trop comment valuer un module o les unit s sont totalement diff rentes De plus les formateurs et responsables de module n ont pas de pr cision par rapport leur propre cours Et pour finir l un des principes de la d marche d valuation est l anonymat et la confidentialit or ces deux aspects ne sont pas forc ment respect s dans tous les cas On peut remarquer dans la colonne am liorations possibles suggestions du tableau que beaucoup des probl mes peuvent tre r gl s par une automatisation de la d marche d valuation des modules C est pourquoi le projet d une valuation en ligne trouve tout son sens Yasmina Chapuis 17 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 4 Situation en externe Pour pouvoir porter un regard critique et constructif sur notre outil d valuation actuel il est important de conna tre la d marche et le mode de fonctionnement de l EEE dans d autres institutions De plus avoir un change avec des personnes d autres institutions peut me donner des arguments qui encouragera ou d couragera l Unit Qualit mettre en ligne le syst me d valuation Mon choix s est fait sur quatre institutions en fonction de leur syst me actuel L Universit de Gen
127. n syst me d valuation des enseignements par les tudiants la HEP Vaud Formation de base HEP La HEP assure la formation de base en p dagogie en didactique et en sciences de l ducation au niveau Bachelor au niveau Master et au niveau post Master HEP Vaud www hepl ch Formation postgrades HEP Les formations postgrades de type Certificate of Advanced Studies CAS entre 10 et 29 cr dits ECTS Diploma of Advanced Studies DAS entre 30 et 59 cr dits ECTS et Master of Advanced Studies MAS minimum 60 cr dits ECTS sont des formations compl mentaires certifi es qui s adressent des professionnel le s au b n fice d un premier dipl me de formation niveau bachelor ou jug quivalent ou d un dipl me professionnel d enseignement Elles se font en principe en cours d emploi et permettent aux enseignants ou aux professionnels de la formation d assumer des t ches de conduite exigeantes au sein d organisations publiques ou priv es actives dans le domaine de la formation d acqu rir des comp tences sp cifiques suppl mentaires et ou d apporter une contribution au d veloppement de leur organisation gr ce un savoir professionnel approfondi HEP Vaud www hepl ch Gestion de la qualit Ensemble des activit s et des proc dures de gestion qui d terminent la politique de qualit d une organisation et la mise en pratique de celle ci Les principaux instruments de la gestion de la qualit sont la planificatio
128. nes t Canevas rapport Archives papiers et lectroniques Rapport Formateurs trices Eudiant e s Comit tudiant e s Conf rence DF Conf rence di Mesures prises voir proc dure DF A 2 Annexes 2 Ech ancier g n rique pour l valuation des enseignements Tita Plan Qualit D lai D lai Fonmetre du plan Entite concerne RE hep LS Unit Qualit XX 0000 VO Ech ancier g n rique pour l valuation des enseignements Cette proc dure vise d finir les delais et dur es n cessaires au bon d roulement des valuations pour la formation de base Pr paration et diffusion sur le site des documents Proc dure canevas consignes liste des modules et questionnaire Retour des questionnaires l Unit Qualit D pouillement des questionnaires et envoi des r sultats aux responsables de module Retour du rapport des formateurs canevas la direction Fichi Echhanour g n rique Vogralli Modul rar Lucas HOULMANN La 16 04 2010 0842 Appuye sut CanevashtER P1 jusqu 1 mois apr s le d but du semestre jusqu la fin du semestre avant les examens 1 2 mois selon le nombre de module valu 2 mois 1 2 apr s la fin du semestre automne 4 mois 1 2 apr s la fin du semestre printemps juillet ao t compris Yasmina Chapuis Annexes 3 Proc dure pour les modules dont les r ponses globales des tudiants son
129. nnaires prendront le temps de donner leur avis S assurer que le feedback soit donn ou que Le feedback sur les r sultats n est pas toujours l UQ s occupe d envoyer un mail avec un fichier Proc dure Etudiants donn s aux tudiants qui r sume les r sultats Responsables de module Les formateurs et les tudiants souhaiteraient Proc dure Formateurs disposer avoir un retour sur les r sultats plus Par l automatisation de la d marche les Temps Etudiants rapidement r sultats peuvent tre donn s plus rapidement Difficult pour les formateurs et responsables de Responsables module de rendre un rapport d auto valuation la Proc dure de module Direction de la formation cause de leur horaire et Temps Formateurs cahier des charges La saisie des donn es se fait la main dans un tableau Excel ce qui engendre une grosse perte de Par l automatisation de la d marche il n y a plus temps surtout lorsque beaucoup de modules aucune saisie effectuer Seulement mettre en Unit Qualit doivent tre valu s pendant un semestre forme les r sultats Responsables Perte de temps dans la modification du Par l automatisation de la d marche les bas sur le rapport interm diaire du GT Dispositif et sur tout ce que j ai remarqu qui posait probl me lors du lancement de la saisie et des analyses de l valuation 10A 3 Cf Termes et d finitions Cf Termes et d finitions Yasmina Chapuis A 7 Annexes questionnaire dans
130. objectifs du module sont bien d finis dans les documents pr sent s Les contenus du module permettent d atteindre les objectifs comp tences annonc e s Vous disposez des connaissances pr alables pour a Objectifs et suivre ce module avec profit contenu du L articulation des unit s du module module est pertinente e Non plut t non Les m thodes p dagogiques plut t oui oui employ es dans ce module sans avis vous ont permis de r aliser des apprentissages satisfaisants Vous comprenez bien l importance de ce module pour votre formation Vous savez de quoi vous devez faire preuve pour la certification Globalement ce module vous apporte beaucoup Globalement vous appr ciez ce module Combien d heures de travail consacrez vous par semaine en lt th th ou lt 2h c Investissement moyenne ce module en plus 26h sans des heures de cours et de avis s minaire 3 Evaluation des unit s e Cette unit m a beaucoup e Non plut t non a Unit 1 appris plut t oui oui Yasmina Chapuis A 25 b Appr ciation g n rale du module Annexes e Vous appr ciez cette unit e Cette unit m a beaucoup b Unit 2 PR LL o e Vous appr ciez cette unite sans avis pas concern par cette unit e Cette unit m a beaucoup appris c Unit 3 e Vous appr ciez cette unit 4 Commentaires sur le module e Quels sont selon vous les points forts du module Quels sont selon vous les asp
131. oir d j des l ments de discussion la r union pr vue D apr s les formateurs la r union de bilan s est tr s bien d roul e et a t utile sympathique et constructive car il y a de tr s bonnes personnalit s au sein de l quipe et ils ont beaucoup appr ci le fait que je leur aie pr sent les r sultats de l outil Ce retour leur a t tr s pr cieux Au niveau de la confidentialit des r sultats de l valuation du module 1 formateur sur 7 dit savoir que cette confidentialit n est pas toujours respect e Certains responsables de fili re ont acc s aux donn es pour pouvoir faire des tudes ou certains formateurs ont t mis au courant des r sultats d autres Les 6 autres formateurs ne savent pas si ces r sultats sortent du module Ils ont l impression que ceux ci sont discut s seulement lors de leurs s ances En d pit de cela quelques enseignants ne sont pas d rang s par le fait que leurs r sultats puissent tre divulgu ailleurs La r union s est d roul e en plusieurs tapes le responsable de module a fait un tour de table pour voir ce qu ont relev les formateurs au niveau du module Ensuite chaque formateur a donn son ressenti par rapport son propre cours les points qu il faudrait am liorer et aussi cibler les choses positives qu il faudrait garder et ce surtout gr ce aux commentaires des tudiants Puis ils ont discut de ce qu il faudrait modifi et comment ils peuvent y arriver
132. ommentaires o on veut les commentaires sont moins d taill s Annexes gain de temps dans la saisie des donn es pour l UQ r sultats sont donc plus facile traiter possibilit de r fl chir et de r pondre au questionnaire quand ils en ont envie soulagement d une grande surcharge de travail pour le formateur cela arrive directement la personne qui traite les donn es rapidit de la r ception des r sultats moins d influence dans la version papier on ne peut pas faire de rappel aux tudiants plus de place pour les commentaires oblig s de r pondre toutes les questions pour passer la page suivante cela correspond plus au souhait des tudiants vu que le 91 de ces derniers pr f reraient qu elle soit faite en ligne pas possesseur d un ordinateur ou d une connexion internet on peut s y soustraire facilement le temps pour r pondre au questionnaire est pris sur la vie priv e de l tudiant les tudiants ont besoin de mettre une t te sur le questionnaire donc il faut une introduction pas de possibilit d interaction sur une formulation mal comprise probl me technique qui contraindra l tudiant abandonner plus facilement la mise en pr paration emb tant d tre oblig de r pondre toutes les questions pour passer la page d apr s d contextualise la d marche et risque de faire perdre le c t humain ligne des questionnaires demande une grosse A 69 Annexes 28 Proposition de
133. on du module sesesssesssssssssssssssesssssssssseesee A 56 22 R sultats transmis habituellement aux formateurs ss A 58 23 Tableau de fr quence de l valuation de l outil neseseseesssssssssssssssssssssssssesessee A 60 24 Graphiques de l valuation de l outil sesessesosoesssssssssssssssssessssssesosssssssssssseseessee A 61 25 Commentaires des tudiants de l valuation de l outil A 62 26 Questionnaire pour r colter le point de vue des formateurs s sssesssssssssssssssssee A 67 27 Tableau comparatif des critiques des formateurs et des tudiants par rapport valuation en EN de a a 0 ee A 68 28 Proposition de questionnaire pour une future EEE scene A 70 Yasmina Chapuis A 1 Annexes 1 R sum de la proc dure d valuation des enseignements par les tudiants 2 1 L Le em Resp Liste des modules fili res u Diffusion sur le site Direction Demande aux formateursfrices DE peser h n D lai A MStSorenian Passage questionnaire Resp dans les cours D lai B US D lai C ug nr Retour aux resp modules et Et ER ECTS archivage MON TC 1 Synth se des r sultats COTE ee uQ mesures prendre et diffusion RES Envoi du rapport canevas D lai Formateurs DF re Les d lais sont d crits dans l ch ancier g n rique cf annexe 2 Yasmina Chapuis Proc dure FO 0013 Liste modules Questionnaire Consig
134. ondent aux questionnaire il faut encourager le plus possible les tudiants utiliser AGE Etudiants et enseignants sont oblig s d y aller car les notes les horaires les informations etc se trouvent sur cette plateforme Ensuite le taux de retour n est pas assez lev La HEG GE voudrait augmenter le taux sans que l valuation ne devienne une contrainte pour les tudiants Certaines fois il peut arriver que les commentaires des tudiants soient durs ce qui fait qu il doit y avoir une Yasmina Chapuis A 19 Annexes coordination de la part du REV et d AGE Ensuite l outil n est pas innocent dans certains cas l valuation peut avoir un impacte sur la nomination des enseignants car la direction conna t les r sultats Finalement les questionnaires sont les m mes pour chaque cours Il serait bien de diversifier les questionnaires et d avoir des questions plus pr cises Universit de Gen ve UNIGE Mallory Schaub UNIVE RSIT DE GEN VE Objectifs L valuation des enseignements par les tudiants a t mise en place il y a environ 10 ans dans le but au d part d avoir une valuation formative li e la n cessiter progressive de fournir un moyen de contr ler la qualit de la formation Petit petit elle s est enrichie et les doyens demandaient un retour des r sultats L EEE est per ue actuellement statutaire Elle permet de r guler l enseignement et de guider le d veloppement professionnel des ens
135. onvenable sur les sujets redondants ou manquants figur s dans sur les supports de cours au point sur les th matiques abord es le questions par unit s et non par module sur ce qu ils ont appris et retenu questionnaire module valu apr s les examens pour questions plus cibl es sur les contenus ou alors une indication pouvoir juger au mieux de l utilit et de la dans le questionnaire qui pr cise le fait que l valuation porte sur clart du cours le contenu et non sur la prestation des enseignants questions plus pr cises proposition de rencontre d un des formateurs par rapport aux commentaires que les tudiants apportent caract res trop gros manque de vivacit dans les couleurs de la mise en page questionnaire trop simple mise en page claire confortable agr able conviviale et ad quate termes compliqu e facile suivre et naviguer questions pas claires on voit bien la diff rence entre les questions gr ce aux ombrages 96 5 des tudiants sont satisfaits de la mise la progression en bas de page est agr able en page et de la clart des questions les questions sont assez claires 6 formateurs sur 7 85 6 sont satisfaits de la mise en page et de la clart des questions 100 des formateurs pr f rent le questionnaire en ligne Mise en page et clart des questions 54 9 pr f rent le questionnaire en ligne et cela i i A TE est gal pour 36 1 donc on peut dire que 91 sont pour une une a
136. peut tre faudrait il tre plus pr cis je donn es Economie de papier et trouve ce genre de questionnaire tres aspect plus cologiec general Pas de gaspillage de papier et plus pratique car ca envoie directement la personne concern e pas besoin de devoir encore amener la feuille l appr ciation de chaque professeur de quelque part chaque module pr cision le m me probleme existe sur la version papier car par exemple pour la Non je pense que les cases points forts points faibles et suggestions laissent la possibilit aux personnes d exprimer cela laisse plus de temps pour d autres points qu ils leur semblent r pondre i Peut tre des questions visant particuli rement les diff rents enseignants Cela facilite le d pouillement d une du module je pense ici aux enseignants de part et surtout c est plus colog moins de papier Et c est tr s facile de prendre 10 minutes la maison c est En ligne beaucoup plus pratique qu en cours Yasmina Chapuis Unite Qualit Evaluation test 13 05 11 4 5 Il devrait avoir un espace apr s chaque question g n rale pour donner plus de Yasmina Chapuis A 65 Annexes Semestre 10A A l avenir vous pr f reriez remplir le questionnaire en ligne dans sa version Commentaires papier c est gal sans avis Merci de pr ciser votre r ponse Dans sa version pa Yasmina Chapuis Unit Qualit Evaluation test Je n ai pas de reproche
137. plus d informations sur quels sont les points positifs les points n gatifs et les am liorations faire dans leur module Ils sont sans doute les plus pr cieux aux yeux des enseignants car ils apportent les critiques des tudiants par rapport l enseignement donn ce qui permettra aux formateurs d envisager des am liorations Enfin on peu passer la cr ation de la synth se des r sultats C est la conseill re la formation qui cr e cette synth se avec un mod le de base Elle contient le taux de retour l appr ciation globale du module en pourcent ce qui r pond aux attentes des tudiants ce qui r pond moins leurs attentes l valuation globale par unit et les commentaires des tudiants Elle permet d avoir un r sum crit de toute l valuation du module et contient de temps en temps des conseils pour les formateurs de la part de la conseill re Ces quatre documents seront finalement envoy s au responsable de module 8 3 R sultats de l valuation de l outil Les r sultats de l valuation de l outil est une des parties les plus importantes du travail avec les critiques des formateurs car on y voit quel sont les avantages et les inconv nients de cette valuation en ligne ce que pensent les tudiants de ce mode de fonctionnement ce qu il faudrait am liorer selon eux etc 8 3 1 Participation Tout d abord je pr cise quelques informations Le nombre total d tudiant qui j ai adress le
138. poss de pas de charte mais un guide pratique l usage des tudiants HES ainsi que le manuel qualit qui pr cise certaines choses sur les EEE Notamment quel est le but de cette valuation le mode de transmission et si elle garantit l anonymat L anonymat est totalement garantit car c est une entreprise externe qui g re les r sultats Population Tous les modules doivent tre valu chaque semestre ce qui repr sente environ 200 cours par semestre Choix de l outil L valuation des enseignements par les tudiants s effectue la HEG GE en ligne Cette m thode a t choisie dans le but d viter une charge de travail trop importante de la part du personnel qualit dans le but de pouvoir valuer tous les cours facilement et car l tudiant peut r pondre au questionnaire chez lui ce qui facilite l anonymat et la confidentialit L institution utilise une des fonctionnalit s de IS Academia appel AGE la HEG GE Les tudiants entrent sur AGE se connectent avec leur login cliquent sur les modules valuer et r pondent au questionnaire Contenu du questionnaire Le questionnaire en ligne est le m me pour tous les cours Cependant l enseignant a la possibilit de demander une valuation sp cifique Actuellement le questionnaire se compose de 4 questions ferm es et de 2 questions ouvertes Les questions sont relatives aux objectifs aux contenus aux m thodes p dagogiques aux valuations aux points
139. puis 12 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Des modules doivent tre annul s car ils n ont pas assez de participants Inscrits Dans certains cas les responsables de modules peuvent avoir eu un accident ou un cong maladie ce qui peut conduire le module en question tre annul 2 3 6 GT Dispositif Au sein de la HEP il existe un groupe de travail Dispositif d valuation des enseignements GT Dispositif Ce groupe est charg de formuler des propositions d am lioration du dispositif actuel Ses objectifs sont S assurer que la d marche d valuation soit toujours li e au processus d am lioration continue de la HEP Proposer une proc dure et des dispositifs d valuation Faire des jugements des critiques donner son avis sur la proc dure et les d marches actuelles Elaborer un rapport de synth se interm diaire comprenant les diff rentes recherches et analyses effectu es jusqu pr sent Organiser une journ e GT Dispositif d valuation qui sera propos e tous les formateurs cette journ e seront pr sent s les r sultats r alis s par le GT Dispositif et certainement les r sultats de mon travail Elaborer un rapport de synth se final en prenant en compte les r sultats de cette journ e et en faisant des propositions Il comprend des personnes qui occupent des fonctions diff rentes au sein de la HEP afin qu il puiss
140. qua ch Evaluation des enseignements par les tudiants On parle d valuation de l enseignement lorsqu on rassemble des avis et jugements pertinents des tudiant e s au sujet d un enseignement en cours de d roulement ou termin le plus souvent au moyen de questionnaires remplir sur papier ou par support informatique HES SO www hes s0 ch Evaluation externe valuation par des sp cialistes qui ne sont pas employ s par l organisation administration responsable de l objet de l valuation et qui n ont aucun int r t personnel financier ou autre dans lobjet valu pouvant influencer leur jugement EduQua et la RCDIP en font partie Glossaire d valuation de l OFSP 2005 Evaluation formative valuation intervenant au cours d un apprentissage ou d une formation qui permet l l ve ou l tudiant de prendre conscience de ses acquis et des difficult s rencontr es et de d couvrir par lui m me les moyens de progresser Dictionnaire Sensagent dictionnaire sensagent com Evaluation interne des prestations HEP En collaboration avec les entit s l Unit Qualit met en uvre des valuations et des analyses qualitatives et quantitatives des prestations offertes par les diff rents services de l institution Elle offre un rapport r gulier sur des activit s telles que l organisation des congr s et des symposiums L unit auto value galement ses propres activit s Dossier visibilit UQ
141. questionnaire pour une future EEE Evaluation des modules Proposition de questionnaire 1 Informations g n rales Les r sultats de cette valuation permettront aux enseignants de conna tre la fa on dont les tudiants valuent leurs enseignements et de trouver le cas ch ant des possibilit s d am lioration Ces r sultats seront aussi int gr s dans une synth se globale adress e la Direction de la formation et au Comit de direction de la HEP Cette valuation porte sur le contenu du module et non sur la personnalit de l enseignant Merci de r pondre aux questions jusqu la fin Donnez librement votre opinion vos r ponses seront trait es de mani re anonyme Le questionnaire dure environ 15 minutes Date JJ MM AAAA Date du jour Votre flll re Autre veuillez pr ciser Votre semestre d tudes wv Yasmina Chapuis A 70 Annexes Evaluation des modules Proposition de q 2 Evaluation du module Veuillez pour chaque question cocher la case qui correspond le mieux votre opinion personnelle Objectifs structure et contenu du module N Plut t Plut t Sans ON non oui Oui avis 2 Le module est globalement coh rent Cuers PE A 4 Le contenu du module permet d atteindre les C EST N ET 9 objectifs comp tences annonc e s 6 Les m thodes p dagogiques employ es dans ce O 0O O 0O module vous ont permis de r aliser des apprentissages satisfaisants
142. r sultats par unit ont ils t abord s et trait s 14 Est ce que les r sultats vous ont permis de prendre ensemble des mesures pour am liorer le module id e ou mise en uvre Utilisation des r sultats dans les unit s 15 Est ce que les r sultats vous ont permis de prendre des mesures pour am liorer votre unit id e ou mise en uvre Autre questions 16 Pensez vous qu il puisse y avoir des diff rences dans les jugements des tudiants suivant s ils r pondent en ligne ou sur papier 17 l avenir pr f reriez vous que l valuation des modules se fasse en ligne dans sa version papier ou c est gal Pourquoi 18 Quels sont pour vous les avantages d une automatisation de la d marche 19 Et les d savantages 20 Avez vous des remarques autres critiques apporter Yasmina Chapuis A 67 Annexes 27 Tableau comparatif des critiques des formateurs et des tudiants par rapport l valuation en ligne Etudiants sur la pertinence du contenu des unit s sur les liens entre les unit s sur l appr ciation des enseignants r ponses sur les stages aux questions soutient dans le travail et sur les comp tences compr hension des explications sur l apport d une meilleure connaissance du m tier Autres sur la somme de travail minime suffisante ou sur le changement de repr sentation du m tier d enseignant questions qui importante sur l apprentissage devraient sur les horaires c
143. r le responsable de module dans le fait de devoir prendre le temps de tout expliquer ses formateurs Lancement de l valuation et r colte des donn es 6 Intervention dans la salle de cours 7 Envoi du mail de lancement des valuations aux tudiants 8 Envoi des rappels n cessaires R sultats 9 R sultats de l valuation du module 10 R sultats de l valuation de l outil 11 Transmission des r sultats au responsable de module 12 Participation la s ance organis e entre les formateurs et le responsable de module pour discuter des r sultats de l outil utilis 13 S ance avec chacun des formateurs et le responsable de module pour r colter les critiques Les points 6 13 seront discut s dans les chapitres suivants Cf Annexe 8 Yasmina Chapuis 22 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 6 Le questionnaire en ligne L valuation en ligne a demand de nombreuses adaptations du questionnaire habituel Il a fallu notamment laborer un questionnaire un peu diff rent du questionnaire actuel choisir le dispositif informatis inclure le questionnaire dans le logiciel choisi et v rifier la fonctionnalit du questionnaire 6 1 Choix des questions et structure du questionnaire Le contenu du questionnaire actuel n est pas ad quat pour une valuation en ligne Il a donc fallu faire un nouveau choix de questions plus adapt es et
144. ration du questionnaire sur SurveyMonkKey ren 24 6 4 Mode de transmission du questiONnaire nn nine 24 6 5 V rification de la fonctionnalit s ss seresnsensersensenssresrnnnnnrnnennnnnnnnnnnnnnennnnnnnnennnnnnntnnnennnnnnnnnnnnnnnnnnnnnnennnnnnn ne 25 7 Lancement de l valuation du module et r colte des donn es sssssss 26 7 1 Mail de lancement de l valuation inner 26 7 2 Lancement de l valuation du module nn nnnonnonnonus11onnannrunnnnnnnnonnonnonnonnonnnneonnonnnnnnnnonnnnnnnennernennrnnnnennnenas 26 Fio RaO a E A 27 CE e o E E E T S E A E A E 30 8 1 Mise en forme du fichier de donn es nnnnnnnmnnemennnenenenenennnrennnnnennnnnse 30 8 1 1 Probl mes de SurveyMonkey et t l chargement des r ponses rss 30 D 12 Miseenforme dans EXCOL ee ere ane ste at tr ne deu 31 8 2 R sultats de l valuation du module nn 31 8 3 R sultats de l valuation de l outil 32 DL PO CICIDO OO ee D eo 32 amp 32 Presentation des resultats nee anasini A ee ee AOLE 33 Goa AOE COS POS a E EEE EE EA 33 Yasmina Chapuis 4 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 9 Communication des r sultats ss ssesssssesscescescsescescsescescesosesee 36 10 Point de vue et commentaires des formateurs ssssssssssessessssee 37 IOL PR T E 37 10 2 Contenu du QUESTIONNAITE 22 es inanan eaaa arinina uan kaniskalan 38 10 3 Mise en forme des r sultats sscncemeeene
145. re 150 modules par ann e 200 modules par 750 unit s Yasmina Chapuis 19 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud semestre d enseignement par semestre En ligne ou en scannant avec le programme Evasys En ligne avec le programme En ligne avec le En ligne avec IS Qualtrics programme Vovici Academia Questionnaire la carte nn a Questionnaire sp cifique PERI L enseignant choisit 6 questions Questionnaire sp cifique Questions commune dans une liste peut r diger 3 l npp Questionnaire commun Questions commune questions sp cifiques cr es ue questions et une question est chaque module questions sp cifiques par les responsables de commune tous les cr es par les enseignants module RM questionnaires 6 10 questions Environ 30 questions Environ 20 questions questions O i O Taux de de root 20 46 80 sur papier 50 en retour ligne Envoy s aux RM par le secteur Zollikofen Diffusion des Envoy s aux enseignants par le Envoy s aux responsables Questionnaire sp cifique commun Envoy s aux enseignants REV RCE et direction par AGE Envoy s aux enseignants r sultats secteur Qualit de fili res RF par les RM Envoy s au responsable de secteur par les RF par FormEv Yasmina Chapuis 20 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 5 L organisation d
146. ront trait s s par ment Un rapport pour l valuation du module et un rapport pour les critiques de l valuation en ligne Il faut ensuite t l charger un rapport apr s l autre en le s lectionnant puis en cliquant sur Toutes les r ponses r colt es gt Format pour une feuille de calcul gt Colonnes Raccourcis gt Cellules Valeur num rique 1 n gt Demander le t l chargement Le rapport apparaitra ensuite dans une liste des historiques Date de la demande Nom du sondage Nom du rapport Format Actions Evaluatio Feuille de calcul condens e 17 03 203 Q lt 1034 2011 10 45 10A Introdue Rapport par d faut PURE En attente 16703 2011 15 11 Evaluatio E Rapport par d faut R SUM uniquement T l charger Supprimer 10A Introduc Projet plan d tudes BP 2012 romat PDF 15 03 2011 15 22 Rapport par d faut R sum uniquement T l charger Supprimer consultat Formet POF gt 1 deli A uniquem ini 04 03 2011 11 23 ie 4 N os 1m Rapport par d faut a A T l charger Suppnmer Cliquer sur T l charger gt Ouvrir On a pr sent nos deux fichiers de donn es de base Yasmina Chapuis A 50 Annexes Capture d cran du fichier de donn es 17 wapow np spuur sap voneojyen NO m 1 3 6 19 12 10 16 12 10 83 10A 19 12 10 16 12 10 84 10A 87 N PN en 19 12 10 16 12 10 85 10A 86 10A 3 3 3 r1 19 12 10 1
147. roule au d but du cours car ce moment l les tudiants coutent encore avec attention La formatrice qui donne le cours m introduit et introduit les valuations des modules et me laisse ensuite la Cf Annexe 13 Yasmina Chapuis 26 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud parole Mon intervention ne s est pas bien d roul e Avec le stress de devoir parler devant 202 tudiants je me suis sentie tr s mal l aise devant eux j inversais mes phrases j avais la gorge tr s s che et mon c ur battait vite J ai l impression d avoir b cl mon discours avant d tre sortie de la classe 4 Enfin apr s l intervention dans la salle de cours j envoie le mail de lancement de l valuation du module aux tudiants 7 3 Rappels Afin d tre s r que le taux de retour de r ponses au questionnaire soit lev il est indispensable d envoyer un ou plusieurs rappels Je rappelle juste deux dates importantes qui permettront de faire le choix de la date des rappels Le 16 d cembre 2010 Lancement de l valuation du module Le 23 d cembre 2010 D lai de retour des r ponses des tudiants Il est important de faire un premier rappel avant l ch ance du 23 d cembre 2010 pour annoncer aux tudiants que l ch ance approche et un deuxi me rappel apr s l ch ance pour pr venir les tudiants que le d lai est d pass et que l UQ attend un retour de leur part C
148. rs qui cours qui doivent tre r pondu seront trait s par scannage en ligne 5 a L enseignant distribue les 5 b Un rappel est envoy aux questionnaires aux tudiants tudiants environ 1 semaine environ 1 mois avant la fin des apr s l envoi du mail Cours 6 a L enseignant d signe un tudiant 6 b La session est cl tur e avant la qui se chargera de r colter les fin des cours questionnaires et de les envoyer en courrier interne T a FormEv scanne les questionnaires 7 b Les r sultats sont g n r s et retranscrit les commentaires automatiquement dans le des tudiants dactylographi s syst me EvasSys 8 Les r sultats sont envoy s aux enseignants avant la fin des cours pour que les tudiants puissent recevoir un feedback de l valuation 9 Les doyens peuvent acc der aux donn es depuis la plateforme ou un CD contenant les r sultats leur tre envoy 10 Le doyen est tenu de donner suite aux valuations Il doit prendre des d cisions suivant les r sultats de l valuation d un enseignant 11 Les enseignants peuvent aller voir le conseiller p dagogique pour parler des r sultats 12 Le doyen r clame le dossier d valuation d un enseignant pour toute nomination promotion ou renouvellement Par contre pour toute les autres formations qui ne sont pas en phase pilote et qui sont encore au mode papier les enseignants doivent aller t l charger le questionnaire ad quat sur le site internet et faire exac
149. rsreenmecemecemeeeesneeenscemeenesnenenensneesnmeemeneennensnnnse 39 10 4 Utilisation des r sultats dans le module sssssessessusuunusnunnnunuennnnunnunnunnunnunnunnunnunnnnnunnnonunnunnnnnnnnnnnnnnnennnnnna 40 10 5 Utilisation des r sultats dans les Unit S s ssseseensunuenusnuunnununnunnunnunnunnunnunnnnnunnunnunnunnnenunnunnnnnunnnnnnnnnnnnnnna 41 10 6 Autres types de AUC SLIONS anne mme ere 41 11 Conclusion sur les r sultats sseessescscsssssscccceccssssssoosooceccessessesssssscoeesee 44 P Gage T o EPE AE E PEA E E EEEE E PATA 48 13 Lexique des abr viations sossessossessesssssssssssssssossossossossssssssosssosossssso 50 14 Termes et d finitions eesssssssssococccccccssoccccceccccsessosossceccecsessssocsocecesssee 52 15 DD OR 61 e CO 61 ES DOCS a on 61 Loa OS O E A EA 62 16 Table des illustrations esesssssssceccccsccsscocsccccccesessssssscosceccsessssossseccesesee 64 LOL PEUR E E TAE A A I A A E E O A N AA 64 EG E E o e L E E E E E A AE EN EE A O E T 65 toL Tbe eE a A a 65 EE a EA 66 Yasmina Chapuis 5 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 1 Introduction Une haute cole p dagogique a pour objectif premier d assurer une formation de base des tudiants souhaitant devenir enseignants et une formation compl mentaire pour les enseignants d j en activit Elle a aussi pour deuxi me objectif la recherche
150. rtant de leur faire part des r sultats obtenus La s ance s est bien d roul e et les formateurs ont appr ci le fait que je leur pr sente ces r sultats Ils ont t int ress s et content d apprendre que l exp rience a t tr s positive Ils esp rent que mon travail portera ses fruits et que l Unit Qualit pourra l avenir envisager d effectuer l valuation des enseignements de mani re informatis e Yasmina Chapuis 36 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 10 Point de vue et commentaires des formateurs Ayant d j r colt les critiques des tudiants il est 3 important d avoir l avis de diff rentes personnes concernant l outil en ligne C est pourquoi l avis des formateurs et du responsable de module m int resse galement Afin de pouvoir r colter leurs critiques concernant toute la d marche d valuation en ligne j ai pris rendez vous avec chacun d entre eux lors de la s ance de bilan du module et lors de l entretien je leur ai pos une s rie de questions Ils taient 8 formateurs et un responsable de module Sur les 9 personnes j ai pu obtenir un entretien avec 7 d entre eux Le questionnaire est s par en 6 parties avec au total 20 questions Il y a une partie sur la proc dure sur le contenu du questionnaire sur la mise en forme des r sultats sur l utilisation des r sultats dans le module sur l utilisation des r
151. s informations g n rales le fait que l valuation porte sur le contenu du module et non pas sur la personnalit de l enseignant car les tudiants ont tendance m langer les deux Ensuite j ai imagin une s rie de questions qui pourraient figur es dans une future version sur la base du questionnaire test de l ancien questionnaire et des r flexions des tudiants et formateurs Voir la proposition de questionnaire l annexe 28 Cependant on pourrait tout fait imagin un mode de fonctionnement plus ou moins gal l UNINE Elle envoie un questionnaire en ligne contenant 30 questions chaque enseignant L enseignant choisit 6 questions parmi les 30 et peut en cr er 3 Je trouve cette fa on de faire tr s int ressante car elle permet l enseignant de choisir les questions qui sont pour lui les plus importantes et les plus justes poser pour son cours Cette valuation servira l enseignant d avoir des pistes d am lioration pour son cours il est donc normal qu il puisse participer la cr ation du questionnaire Yasmina Chapuis 47 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 12 Conclusion Les r sultats de ce travail de maturit tant de nature tr s positifs m ont permis de constater qu une valuation des enseignements par les tudiants en ligne tait envisageable la HEP En effet ce mode de fonctionnement poss de plus d avantages que la version p
152. s minaire Au niveau de l organisation de la HEP la direction se compose du recteur du directeur de l administration et du directeur de la formation Ces trois derniers forment le Comit de Direction L Unit Qualit dans laquelle je suis d pend du Recteur Elle a pour but de contribuer au pilotage du syst me de la HEP c est dire de g rer guider l institution en soutenant le d veloppement de l ensembles des unit s et en portant conseil la direction En r sum g rer la qualit afin de permettre une am lioration continue sur l ensemble de l institution et ainsi la satisfaction des besoins exprim s par l ensemble de ses utilisateurs Organigramme Comit de Recteur direction Guillaume Vanhulst Directeur de la formation Directeur de l administration Cyril Petitpierre Luc Macherel Planification Boris Tchaloyski Qualit Philippe R Rovero Finances Aude Besseau Service Acad mique Jean Marc B hlen Formation Continue et Prestations de service Catherine Chevalier a i Recherche et d veloppement Relations nationales et internationales Jean Luc Gilles Relations tablissements partenaires de formation Jean Pierre Laurent Ressources humaines Roxanne Hugron Martin Infrastructures Fran ois Mathey Communication Barbara Fournier Informatique Philippe Schmid Biblioth que V ronique Avellan Fili res Unit s d enseignement et de recherche Coordinateur Jacqu
153. s qui correspondrait au contenu du module et un valuation apr s les examen afin de savoir si le cours tait complet et s il permettait de r ussir l examen Cependant je pense qu il est difficile de faire une valuation de ce type car l chec ou la r ussite de l examen de l tudiant peut l influencer dans sa fa on de r pondre et son avis ne portera non plus sur le contenu du module mais sur la fa on dont l tudiant a r ussi o non son examen Ce qui n est pas le but de l valuation des modules Les rappels sont pour les formateurs n cessaires afin de responsabiliser les tudiants Les formateurs sont globalement satisfaits de la nouvelle mise en forme des r sultats et savent comment utiliser ces r sultats pour am liorer leur cours Ces r sultats sont cens rester confidentiel dans le secteur du module n anmoins les r sultats du travail ont d montr que certains r sultats de module taient utilis s par les responsables de fili res Yasmina Chapuis 44 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Enfin du m me avis que les formateurs je pense que le jugement des tudiants est diff rent lorsqu ils r pondent en ligne la place du format papier C est plus efficace car les tudiants peuvent r pondre quand ils ont en envie ils peuvent prendre le temps qu ils veulent pour r pondre ils ne sont pas influenc s par un autre tudiant ou par le formateur en cla
154. s th oriques acquis dans le cadre de divers modules et des savoirs d exp rience acquis dans des lieux vari s en se centrant sur une th matique et sur l analyse de leur progression au cours du semestre HEP Plan d tudes fili re Enseignement primaire ann e acad mique 2010 2011 Statutaire Conforme aux ensembles des lois des r glements qui r gissent une collectivit une association Dictionnaire de TV5Monde dictionnaire tv5 org Tableau de bord UQ Yasmina Chapuis 59 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Suivi de la r colte des donn es des valuations de l enseignement et de leur traitement Unit HEP Une unit est un cours Dans un module il y a plusieurs unit s Par exemple le module BP101 introduction la profession se compose de 3 unit s BP101 1 devenir observateur BP101 2 histoire et sociologie de l ducation et BP101 3 choix professionnel le r le de l enseignant Unit Qualit L Unit Qualit assure deux types de mission La premi re se situe au niveau strat gique du pilotage du syst me de la HEP Elle apporte sur ce plan analyse et conseil la direction de l institution Dans ce domaine le soutien et l accompagnement des d marches conduisant la confirmation du dossier de reconnaissance CDIP font partie des activit s primordiales de l unit Le d veloppement d une culture manag riale centr e sur l am liorat
155. s cette balise par le pr nom du destinataire LastName Nous remplacerons cette balise par le nom du destinataire Email Nous remplacerons cette balise par l adresse lectronique du destinataire Nous remplacerons cette balise par le texte que vous avez stock dans le champ valeur personnalis e de ce destinataire Enregistrer st pr visualiser CustomData Dans l objet du message lectronique j ins re Questionnaire d valuation d un module en ligne pour mon travail MPC J efface tout le corps du message en laissant seulement le lien vers le sondage et le lien de d sabonnement Ces deux liens ne peuvent en aucun cas tre enlever du corps du message sans cela le message ne fonctionnera pas Je rajoute au corps le texte qui sera envoy UQ Pour pouvoir faire un message agr able lire avec des choses en gras etc il faut cocher le bouton Envoyer ce message avec votre propre code HTML et ins rer au message tous les codes HTML n cessaires Yasmina Chapuis A 41 Annexes Dans le champ Adresse lectronique de r ponse il faut noter l adresse de l metteur du message c est dire mon adresse On peut ensuite cliquer sur Enregistrer et pr visualiser R sum du message Planification de livraison des messages Livraison effectu e le 26 novembre 2010 16 02 Destinataires du message Le message a t envoy 5 destinataire s Afficher Aper u du message Vous trouverez ci des
156. s correspondant aux crit res sp cifi s La s lection ci dessus a donn 1 destinataires potentiels Afficher Enregistrer la s lection et continuer L on peut choisir quels destinataires seront concern s par le message Etant donn qu il s agit d un message d invitation on utilisera Toutes les adresses de courrier lectronique envoy toutes les personnes de votre liste qu elles aient r pondu ou non Lorsque l on enverra un rappel il faudra utiliser Pas de r ponse envoy toutes les personnes ayant re u un message lectronique mais n ayant pas encore r pondu Cliquer ensuite sur Enregistrer la s lection et continuer Yasmina Chapuis A 40 Annexes Composer un message lectronique Enregistrer at pr viaualiser Objet du message lectronique Saisissez un objet pour votre message Soyez pr cis dans vos intentions et vitez d utiliser des mots pouvant faire passer votre message pour un spam aux yeux des destinataires Corps du message lectronique Vous souhaitez r utiliser un ancien message Nous effectuons un sondage et vos r ponses seraient appr ci es Un lien de sondage et un lien de d sabonnement doivent tre inclus dans votre message Lorsqu une personne re oit votre courner lectronique elle doit tre capable de chquer sur le lien et de se rendre directement sur le sondage Voici un lien vers le sondage SUEVEYLENK Ce lien unique est rattach ce
157. s cours sont ils convenable sur les supports de cours les supports de cours utilis s sont ils au point et une question sur la pertinence du contenu des unit s le contenu des unit s est il pertinent Certains tudiants donnent leurs avis sur une am lioration qui pourrait se faire au niveau du contenu du questionnaire Par exemple que les questions soient pos es par unit s et non par module que le module soit valu apr s les examens pour pouvoir juger au mieux de l utilit et de la clart du cours et adapter le questionnaire cet aspect et enfin que les questions soient un peu plus pr cises Yasmina Chapuis 35 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 9 Communication des r sultats La communication des r sultats se fait par le biais de la conseill re la formation Une fois les r sultats analys s elle fait un mail qu elle envoie au responsable de module avec comme fichiers joints la synth se des r sultats le tableau de fr quence les graphiques et les commentaires d taill s Le responsable de module envoi un mail ses formateurs dans le but de leur fournir les r sultats et de pr voir une s ance de bilan du module Je participe au d but de la s ance afin de pr senter les r sultats de l valuation en ligne chapitre 8 3 Vu que les formateurs et le responsable de module ont accept que j value leur module en ligne il tait pour moi impo
158. s de la mise en page 10 3 Mise en forme des r sultats La nouvelle mise en forme des r sultats est per ue par les formateurs comme plus agr able plus claire plus utile plus parlante et plus lisible La pr sentation est correcte et r pond plus leurs attentes alors qu avant cela paraissait tr s lourd au regard Le tableau avec les questions le pourcentage et la somme est l Cf Termes et d finitions Yasmina Chapuis 39 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud complet concret et permet de cibler les choses d aller l essentiel et de faire facilement des liens Pour les graphiques la mise en exergue avec les couleurs et les barres empil es est une bonne chose ainsi que les commentaires des tudiants Tous les r sultats donn s ont t assez parlant pour les enseignants sauf les deux questions sur l appr ciation g n rale du module qui reste malgr tout tr s vague Toutefois la grande majorit ne s int resse qu ce qui concerne les critiques de leur unit Et ces informations se retrouvent dans les commentaires des tudiants 10 4 Utilisation des r sultats dans le module Les r sultats ont t transmis aux formateurs par le responsable de module Il a joint les r sultats dans le mail qu il a envoy aux formateurs pour leur confirmer la date de la r union de bilan Les formateurs ont ensuite imprim et lu ces r sultats en vue d av
159. s liens entre les stages et ce module sont coh rents 20 3 3 38 51 4 94 6 Modalit s d enseignement non plut t nonblut t ou oui autres oui plut t oui non plut t non N sans autres _ N total 21 Les expos s sont pr sent s de facon claire 21 68 22 Les supports de cours transparents vid o sont de qualit 22 23 Le contenu des documents fournis est ad quat 23 24 L animation de l enseignement est int ressante et dynamique 24 25 Le les formateurs est sont disponible s 25 L enseignement laisse une place suffisante la pr sentation de points de vue critiques par 26 rapport la d marche 26 27 Le module propose une comparaison de th ories concurrentes 27 28 L enseignement met en vidence les cons quences pratiques des th ories pr sent es 28 L enseignement laisse une place suffisante aux tudiants pour qu ils puissent exprimer et 29 confronter leurs points de vue 29 Investissement Personnel non plut t nonblut t ou oui autres 32 Vous assistez r guli rement aux s minaires 32 1 3 12 82 1 96 4 Appr ciation globale 97 non plut t nonblut t ou __oui_ autres oui plut t oui non plut t non N sans autres _ N total 33 Globalement ce module vous apporte beaucoup 33 0 1 50 46 3 98 2 66 68 34 Globalement vous appr ciez ce module 34 0 0 40 59 1 100 0 67 68 35 36 37 Questions 41 44 destin es uniquement aux tudiant e s MS1 et MS
160. seignement Cette proc dure se fait par la distribution d un questionnaire que doivent remplir les tudiants des enseignements concern s par l valuation Sur la base des r ponses du questionnaire l Unit Qualit doit effectuer des analyses qu elle transmet ensuite aux enseignants Finalement ces derniers doivent r diger un rapport d auto valuation incluant les analyses des r sultats d valuation des enseignements 5 Cf Termes et d finitions Cf Termes et d finitions 7 Cf Termes et d finitions Cf Termes et d finitions Yasmina Chapuis 11 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 2 3 3 Objectifs de l EEE L valuation des enseignements est constitu e de plusieurs objectifs principaux Elle permet notamment de prendre r guli rement en compte l opinion des tudiants faciliter le dialogue entre l tudiant et l enseignant s assurer que les enseignements fournis r pondent aux attentes et aux objectifs de la formation valoriser la qualit de l enseignement et de la formation mieux r pondre aux besoins des tudiants en am liorant les enseignements donner aux enseignants un diagnostic sur leurs enseignements fournir la Direction une vue d ensemble sur la qualit des enseignements donn s 2 3 4 Principes de l EEE L valuation des enseignements s appuie actuellement sur diff rents principes Pour que les
161. sondage et votre adresse e mail Veuillez ne pas transf rer ce message Si vous avez accidentellement supprim le lien de sondage ou le lien de d sabonnement fourni dans le message par d faut veuillez cliquer sur le bouton j appropri ci dessous afin de r ins rer le lian sp cfique Merci de votre participation dans le message Remarque Si vous ne souhaitez plus recevoir Cliquez sur le bouton ci dessous afin d ins rer le lien de d e mails de notre part veuillez cliquer sur Sondage dans votre message i m Ins rer un lien de sondage SurveyLink Cliquez sur le bouton ci dessous afin d ins rer un lien de d sabonnement dans votre message ins rer un lien de suppression RermovelLink C Envoyer ce message avec votre propre code HTML Besoin d aide Adresse lectronique de r ponse Saisissez l adresse lectronique do viendra ce message Assurez vous d utiliser une adresse lectronique valable ou votre message ne sera peut tre pas livr evaluations hepl ch Vous souhaitez personnaliser davantage votre message Nous vous proposons quatre balises personnalis es afin de personnaliser votre message similaire au proc d de fusion et publipostage des applications de traitement de texte I vous suffit d ajouter lune des balises suivantes dans l objet ou le corps de votre message et nous nous nous chargerons de remplacer la balise par le texte lors de l envoi du message FirstName Nous remplaceron
162. sous un aper u de votre message en fonction du premier destinataire de votre liste Ema l Destinataire Emal De s Objet Corps yasmina chapuis h hepl ch Questionnaire d valuation d un module en ligne pour mon travail MPC Afin de voir commant sera affich l HTML dans ce message vous devez envoyer un message de test lt p gt Bonjour tous lt p gt lt p gt Ayant remarqu certaines choses qui n allaient pas dans ce questionnaire et ayant effectu des modifications je vous propose de recommencer l tape en remplissant pour blanc avant le ter d cembre lt p gt lt p gt Voici le lien vers le sondage tps www surveymonkey conmvs aspx lt p gt lt p gt Ce lien unique est rattach ce sondage et votre adresse e mail Veuillez ne pas transf rer ce message lt p gt lt p gt Vous pouvez donc effacer l ancien message car l adresse du questionnaire n est plus valide lt p gt lt p gt Si vous voyez des choses qui pourraient tre am lior es vos remarques sont videmment les bienvenues lt p gt lt p gt Merci d avance pour votre attention lt p gt lt p gt Bonne fin de journ e lt p gt lt p gt Yasmina Chapuis lt p gt lt p gt lt font size 2 gt Remarque Si vous ne souhaitez plus recevoir d e mails de notre pa veuillez cliquer sur le lien ci dessous Vous serez automatiquement retir de notre liste de distribution https lwwwsurveymonkey comoptout aspx lt font gt lt p
163. sse et ils se sentent plus anonymes et peuvent donc juger plus facilement Etudiants et formateurs sont du m me avis par rapport au m dia utilis Par contre les avis sont diff rents concernant le contenu du questionnaire J ai cr e un tableau comparatif des critiques des formateurs et des tudiants par rapport aux questions similaires afin de voir plus pr cis ment les choses sur lesquelles ils sont d accord et sur lesquelles ils ne sont pas d accord Voir l annexe 27 Les tudiants souhaiteraient des questions sur les supports de cours sur l appr ciation des enseignants sur la somme de travail o encore sur les horaires Ce sont des questions plus de type organisationnel et structurel Alors que les formateurs ont propos des questions plus sur le contenu du module donc plus constructives pour une valuation de module Par exemple des questions sur les th matiques abord es sur les sujets en trop ou manquants sur ce qu apporte le module dans la connaissance du m tier etc On voit que les formateurs et les tudiants ont des pr occupations et des attentes diff rentes Pour ces derniers il faudrait une valuation des prestations administratives qui correspondrait plus aux sujets sur lesquels ils voudraient donner leurs avis D apr s le tableau comparatif des critiques des tudiants et des formateurs l annexe 27 ces deux derniers sont d accord sur plusieurs points Notamment la majorit d entre eux sont satisfaits de
164. ssssssssll sm L Conseiller qualit Ou Resp module Plan de rem diation s la DF A 4 Annexes 4 Questionnaire actuel hep Haute cole p dagogique Quatite Avenue de Cour 33 CH 1014 Lausanne www heplch Questionnaire d valuation de l enseignement Module n Titre Semestre 10A Groupe Date Les r sultats de cette valuation permettront aux l enseignant e s de conna tre la fa on dont les tudiant e s valuent son leurs enseignement s et de trouver le cas ch ant des possibilit s d am lioration Le directeur de la formation pourra obtenir galement une synth se de la qualit per ue de l enseignement dans les fili res de formation Merci de donner librement votre opinion Vos r ponses seront trait es de mani re anonyme Veuillez pour chaque question cocher la case qui correspond le mieux votre opinion personnelle et ajouter vos remarques compl mentaires la fin Votre fili re O O O Oo O O BP ES SG MS1 MS2 AUTRES Votre semestre d tudes o o oO o o oO o o o o ter 2e 3e 4e be 6e 7e 8e 9e 10e plut t plut t Atteinte des niveaux de ma trise du module non non oui oui sans avis Vous estimez que le module vous a permis d atteindre les niveaux de ma trise suivants 1 Description des niveaux de ma trise du module selon plan d tude 7 items go o o O o possibles longueur texte limit e 20 mots environ 2 O O oO O oO 3 O O oO
165. st me d valuation des enseignements par les tudiants la HEP Vaud responsabilit s et ce qui donne un sens la r gulation Ce qu il serait int ressant de faire est une quation entre ceux qui r pondent en ligne et ceux qui r pondent sur papier afin de vraiment savoir quel mode de fonctionnement est le mieux D finitivement une des questions qui se pose souvent chez les formateurs est est ce que les prochaines ann es ou pour d autres modules il y aura le m me taux de retour Yasmina Chapuis 43 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud 11 Conclusion sur les r sultats Les tudiants sont de mani re g n rale satisfaits de cette d marche d automatisation La mise en page est bien les questions sont claires le questionnaire est d une longueur adapt e et la plupart pr f reraient remplir le questionnaire en ligne l avenir Cependant d apr s les r sultats l item Les questions qui concernent le module dans son ensemble sont clairement distingu es des questions qui portent sur chacune des unit s on a l impression que certains tudiants ne discernent pas tout fait ce qu est une unit ou ce qu est un module ou alors que les questions concernant les unit s ne sont pas tout fait discern es des questions portant sur le module N ayant pas fait de case Remarques cette question je n ai aucun moyen de savoir quelle a t l incompr hension
166. st effectu avec l UQ je peux r aliser le mail d invitation r pondre au questionnaire aux tudiants Le mail doit contenir des informations sur l valuation du module sur le fait que le module participe un test le temps que prendra le questionnaire le d lai de retour le lien du questionnaire et une signature avec num ro de t l phone et adresse mail en cas de question Il faut cr er un nouveau collecteur qui se nomme Evaluation du module EEK et y ajouter la liste des adresses mails des tudiants en tant que destinataires Vient ensuite la cr ation du mail Ce mail doit tre envoy tous les tudiants L objet doit tre Evaluation du module BA semestre 104 J ins re dans le corps du message le message que j ai pr par en y ajoutant les codes HTML et en n oubliant pas de cocher la case pour afficher ce code Enfin je note mon adresse mail comme metteur du message 7 2 Lancement de l valuation du module Le lancement de l valuation se d roule en plusieurs tapes 1 Je pr pare le discours que je dois faire aux tudiants le jour du lancement 2 La date du lancement de l valuation a t choisie avec le responsable de module pour la fin du semestre et a t fix e au 16 d cembre 2010 14h00 3 cette date l j interviens au d but du cours o tous les tudiants sont r unis afin de me pr senter pr senter le projet et motiver les tudiants participer L intervention se d
167. sultats dans les unit s et sur d autres types de questions 10 1 Proc dure Dans un premier temps tous les formateurs ont trouv que la proc dure tait globalement bien Le fait que je soie intervenue lors d un cours pour pr senter le projet est une bonne initiative car cela permet aux tudiants de mettre un visage sur le questionnaire cela les rend plus concern cela personnalise la d marche et cela marque la pr sence pour le travail Le fait de voir la personne donne plus de sens la demande de remplir un questionnaire Le taux de retour n aurait surement pas t le m me si je n avais pas pr sent mon projet de vive voix Dans un second temps les formateurs pensent qu il est in vitable et indispensable de faire des rappels aux tudiants Il faut insister pour qu ils r pondent car les valuations des enseignements par les tudiants font partie de leurs devoirs Cela leur montre qu ils ont certaines responsabilit s De plus le fait que le dispositif permette d envoyer des rappels seulement ceux qui n ont pas r pondu est tr s int ressant Ensuite actuellement l valuation se d roule la fin du semestre avant les examens 2 formateurs sur 7 pensent qu il faudrait continuer ainsi Pour eux si l valuation tait faite apr s les examens il n y aurait pas les m mes questions et les r sultats seraient diff rents Si certains tudiants ne r ussissent pas leur examen ils ne r pondront s rement pas de la
168. t cr Ajouter des destinataires le Este Cr er Lun message de courrier lectronique Il faut tout d abord ajouter la liste d adresses mails Cliquer sur Ajouter des destinataires la liste gt Ajouter des destinataires manuellement gt J accepte les conditions d utilisation Ajouter des destinataires manuellement Copiez collez les destinataires de votre liste un destinataire par ligne Si vous importez d autres champs s parez les par des virgules et suivez les directives ci dessous REMARQUE les adresses en double seront automatiquement cart es Ordre des champs adresse lectronique pr nom nom de famille donn es personnalis es un seul destinataire par igne Adresse lectronique maximum 255 caract res Pr nom meximum 50 caract res Nom maximum 50 Caract res Uonn es personnalis es maximum 1000 caract res Exemple n 1 Yones imyemal com tom jones 1001 Exemple n 2 tonesdmyemal com 1001 Ajouter des destinataires Ensuite il s agit de copier la liste des adresses mails des l ves trouv e sur IS Academia et de la coller dans le cadre Il doit y avoir un seul destinataire par ligne Cliquer sur Ajouter des destinataires Yasmina Chapuis A 39 Annexes Nouvelle invitation par courrier lectronique Modifier Invitation par courrier lectronique PAS CONFIGURE Destinataire ajout avec succ s La liste comporte pr sent 1 dastinataires Comment voulez
169. t dactylographi es techniques Unit Qualit trois questions ouvertes et ce probl me n existera donc plus Il faut les encourager venir au bureau Qualit pour qu ils posent des questions pour savoir Responsables Beaucoup d enseignants ne savent pas utiliser Excel comment modifier leurs questionnaires Probl mes de module et ont donc de la peine modifier et imprimer leurs Ou par la mise en ligne du questionnaire ce techniques Formateurs questionnaires correctement probl me ne subsistera plus Le questionnaire actuel n value que le module et pas les unit s Il faudrait faire un questionnaire mixte donc Responsables Il est tr s difficile pour l tudiant d valuer des avec une partie sur l appr ciation du module et de module cours s minaires ensembles s ils sont tr s une partie sur l appr ciation des unit s O Formateurs diff rents alors faire deux questionnaires et on valuera Etudiants Il sera aussi tr s difficile pour les formateurs de alors les modules et unit s en deux temps Yasmina Chapuis A 8 Annexes savoir quelles unit s sont bonnes ou mauvaises et donc lesquelles ils doivent am liorer Etudiants Questions des fois compliqu es et peu claires Clarification des questions Etudiants Unit Qualit Responsables de module Formateurs Responsables de module Formateurs Anonymat Confidentialit Etudiants 5 Cf Termes et d finitions Yasmina Chapuis y a certaines questions
170. t de l EEE en externe A 10 7 Synth se du fonctionnement des EEE dans d autres institutions sesssssssssssssseee A 12 8 Mail de communication aux formateurs sssssssossossosesseseossosessessoseoseosessossossossos A 24 9 Tableau des parties et questions du questionnaire sssesessssssececesessesecesesesssoeseo A 25 10 Elaboration des parties du questionnaire sur SurveyMonkey s ssssesesssssseseoeseeseee A 27 11 Questionnaire en OR da a eee cernes A 33 12 V rification de la fonctionnalit du questionnaire sur SurveyMonkey sssesssesssese A 39 13 Mail de lancement de l valuation ssesseossoseossessesseoscossossossossossessesssossossosseseeo A 45 14 Premier rappel aux tudiants ss ssacsesnenaccononaancnenenaccccomancenonacccoesnanccee A 46 15 Deuxi me rappel aux tudiants ssssssssesesssesssesssesssesesssssssesessoscssesesscesssecsoeses A 47 16 T l chargement des r ponses sur SurveyMonkey ssssssssesssescsesesssecesessseseseoessoeses A 48 17 Capture d cran du fichier de donn es ssssssssssesssssescoesssesssesesssscssececoececeoeceoeses A 51 18 Tableau de fr quence de l valuation du module s ssssesssesesesesssecesesssesesesecsssees A 52 19 Graphiques de l valuation du module ssssssssssesssssssssesssesssssecssecssesscosseseseceoeses A 53 20 Commentaires des tudiants de l valuation du module page 1 A 55 21 Synth se des r sultats de l valuati
171. t insatisfaisantes Conseiller Qualit iis Resp A Module lt r wese seoerasaes T 1 gi Ci c al STE de dl d Resp Module ns tosseseuvesst d i Conseiller Qualit Resp Module D 2 T e 2 2 S O A Commission des plans d tudes Direction de la Formation Direction de la Formation gt Yasmina Chapuis RUQ annonce la DF que le module est pour la 2e fois sgatif kd Rencontre avec Conseiller qualit Elaboration du rapport d auto valuation Retour de la revue de direction Lettre d information adress e au resp module Responsable de module prend rendez vous avec Conseiller qualit Remise des r sultats analyse et synth se commentaires adresser la revue de direction Canevas Rapport d auto valuation R valuation du module d s qu il est nouveau propos Module 50 pour la 2e fois Rencontre avec Conseiller qualit Probl me Aspects interne d organisation au module g n rale d une Autre niveau Projet de d valuation rem diation Elaboration du plan de rem diation D cision de la DF Lettre d information adress e au resp module Responsable de module prend rendez vous avec Conseiller qualit Remise des r sultats analyse et synth se commentaires a s s s
172. tement la m me proc dure que pour le scannage sauf que tous les r sultats sont tap s la main par FormEv Participation Le taux de r ponse du mode papier est d environ 80 Pour la phase pilote actuelle le taux est d environ 50 Cependant l enqu te n est pas encore termin e Tout enseignant dont le cours n a pas au moins 10 l ves ou dont l enqu te n atteint pas les 20 ne recevra pas les r sultats des questions ferm es car l effectif est trop petit pour que les r sultats soient pertinents Traitement des donn es et exploitation des r sultats Yasmina Chapuis A 22 Annexes La saisie la gestion et le traitement des donn es sont effectu s par le secteur FormEv FormEv fournit les r sultats aux enseignants et fait chaque ann e un rapport d activit ainsi que des recherches sur l impact de certaines m thodes Les r sultats transmis aux enseignants peuvent se faire en 2 types de rapport L ancien rapport version papier qui contient les donn es brutes un tableau des fr quences absolues et du pourcentage de r ponse pour chaque nonc un histogramme en pourcent un indice de satisfaction avec un graphique et un tableau et les commentaires des tudiants Le nouveau rapport version informatis qui contient pour chaque question une moyenne g n rale la m diane l cart type et le taux d abstention une ligne de profil qui permet de faire des comparaisons entre tudiants ou entre cours et
173. tifier le probl me 2 Do D velopper r aliser mettre en uvre intervenir R aliser les actions pour atteindre le but donner des instructions mettre en uvre une phase test r aliser l uvre 3 Check Contr ler v rifier mesurer V rifier l efficacit de l action contr ler les r sultats en d duire des ventuels probl mes remarqu s 4 Act Agir ajuster r agir am liorer Am liorer corriger les probl mes rencontr s dans l tape pr c dente r aliser un nouveau projet en y apportant les changements n cessaires ce qui am ne recommencer le cercle vertueux D apr s Wikipedia 7 Cf Termes et d finitions 8 Cf Termes et d finitions Yasmina Chapuis 8 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Ici on peut voir les quatre tapes PDCA repr sent es dans une roue Celle ci avance d un quart de tour chaque tape Cette avanc e repr sente le chemin vers l am lioration L valuation de l enseignement et mon travail en lui m me entrent tout fait dans le concept de la roue de Deming J identifie les probl mes actuels des valuations de l enseignement je planifie ce que je veux r aliser Plan je mets en uvre un test en ligne Do je v rifie l efficacit de la phase je prends note des ventuels probl mes de cette action Check j en conclus ce qu il faut am liorer Act Quelqu un d autre reprend mon travail en repart
174. tion est en Suisse allemande De ce fait l IFFP de Lausanne ne poss de pas les r ponses des questionnaires Population Chaque ann e tous les modules doivent tre valu s Ils sont g n ralement valu s en fin de module Le nombre de modules valu s par ann e est d environ 150 Choix de l outil L valuation des enseignements par les tudiants se d roule enti rement sur Internet L IFFP l a toujours effectu de cette fa on car l anonymat est garantit et le traitement des donn es est automatis L institution utilise le programme Vovici gestionnaire d enqu te en ligne Cependant seul le site Zollikofen en conna t le fonctionnement Yasmina Chapuis A 15 Annexes Contenu du questionnaire l IFFP les questionnaires comportent habituellement un set de question commun tous les questionnaires et des questions sp cifiques aux cours que peuvent cr er les responsables de module Le questionnaire se compose d une trentaine de questions assez longues et de diff rentes parties les donn es personnels la formation et l exp rience professionnelle l activit professionnelle les motivations suivre la fili re choisie les conditions pour un bon apprentissage l attitude et les craintes par rapport au module suivis les circonstances organisationnelles par rapport la fili re et les impressions et exp riences pr c dentes v cue aupr s de l IFFP Proc dure La proc dure d valuation l IFFP
175. toucher les personne qui n taient pas au cours lors du lancement Dans la version informatis e il y a plus de place pour les commentaires et les tudiants sont oblig s de r pondre toutes les questions pour passer la page suivante ce qui est une bonne chose Enfin le fait que l valuation soit faite en ligne correspondra plus au souhait des tudiants vu que le 91 de ces derniers pr f reraient qu elle soit faite en ligne Par contre les formateurs ne voient pas un grand nombre de d savantages d une mise en ligne du syst me d valuation Ils pensent qu il peut y avoir un probl me technique qui contraindra l tudiant abandonner plus facilement ou qu un tudiant ne soit pas possesseur d un ordinateur ou d une connexion internet La mise en ligne des questionnaires peut demand une grosse pr paration Cela peut tre emb tant d tre oblig de r pondre toutes les questions pour passer la page d apr s car on ne sait pas ce qui nous attend ensuite Le fait d effectuer l valuation en ligne d contextualise la d marche et risque de faire perdre le c t humain car l automatisation remplace la t che de l homme qui aura moins de travail faire Comme dirait l crivain fran ais Noctuel L automatisation syst me simplifiant tellement le travail qu on finira par avoir besoin d un cerveau lectronique pour se tourner les pouces Le temps pour r pondre au questionnaire est pris sur la vie priv e de l tudiant
176. ttre en forme les deux fichiers t l charg s selon mes besoins r sultats de l valuation du module et de l outil Tout d abord il faut remplacer les cases vides par un chiffre qui servira de modalit pour les cases vides Ce chiffre change suivant les questions Par exemple pour les questions 1 7 il y a 5 modalit s de r ponses possibles La modalit pour les cases vides sera donc 6 Pour se faire il faut s lectionner zones par zones et cliquer sur Edition gt Remplacer gt Rechercher laisser vide gt Remplacer par 6 gt Remplacer tout Ensuite je mets des couleurs pour chaque groupes de question et je change mon fichier de donn es afin qu il soit plus lisible et en utilisant un mod le qui avait t utilis par le GT Dispositif comme test Le plus difficile arrive Il faut cr er plusieurs onglets qui auront des utilisations diff rentes et qui seront compos s de formules On a l onglet Saisie qui est l onglet de base Ensuite je cr e l onglet Matrice qui lui contient les diff rents codes pour les modalit s de chaque question et les r sultats pour chaque modalit et chaque question en nombre et en pourcent avec et sans les non r ponses Cet onglet est tr s utile pour cr er le tableau de fr quence et pour faire des calculs statistiques L onglet Tableau de fr quence reprend les l ments de la matrice sans les non r ponses avec une mise en page plus agr able avec un titre le taux
177. tudiants ce qui fait que les tudiants ne savent pas si en r pondant au questionnaire cela a permit l enseignant d am liorer son cours ou non et donc si ces valuations sont vraiment efficaces Haute Ecole de Gestion de Gen ve HEG GE h e Q Xavier Burdet Haute cole de gestion Gen ve Objectifs L valuation des enseignements par les tudiants existe la HEG de Gen ve depuis 10 ans Lors de son instauration la HEG a prit comme mod le ce que faisaient certaines universit s de m me que la HES SO Une tude a t men e aupr s des enseignants de la direction et de l association des enseignants dans le but d am liorer la d marche et de prendre en compte l avis des diff rentes personnes aptes juger cette d marche L objectif principal de cette valuation est l am lioration de l enseignement est pr ciser dans le manuel qualit de la HEG que les coles HES avec la collaboration des tudiants et tudiantes et des milieux professionnels mettent en place un syst me d valuation de l enseignement et de la formation dans le but d am liorer constamment les activit s d enseignement et de recherche prioritaires des coles Il est aussi pr ciser dans la Loi f d rale sur les hautes coles sp cialis es LHES que les tudiants doivent pouvoir valuer les cours auxquelles ils assistent D apr s le manuel qualit de la HEG Gen ve Yasmina Chapuis A 17 Annexes Principes La HEG GE ne
178. ulevay Xavier Burdet et Madame Mallory Schaub pour leurs entretiens Yasmina Chapuis 3 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Table des mati res k Mrono HON cronan E EEEE 6 2 Elements theorigUCS PRE RER E NEE a 8 L ROC de DE ae A E A a E EE E ne 8 2 2 Pr sentation et fonctionnement de la HEP Nes 9 2 35 L valuation de l enseignement ala HEP irnos 11 2 3 1 Loi sur l valuation de l enseignement nn 11 oa D O RC E E a E E 11 2 OO OR a a A AE A E E EEE A OT 12 234 Principes d RER iaiT Ea AAEE eiea 12 2 3 5 Le choix des modules valuer s ssss sesssesssernnernnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnunnnnnnnnnnnnnnnnnnennnennnnnnnnnnnnnnnnnnnnnnenennns 12 20 GT DO AEA A N EA EA E E 13 3 Etat actuel de la question sessessossessssssssssssosssssosssssossosssssossosssssossssoo 14 3 1 Proc dure d valuation actuelle n nnnsnuouonnonnoruonnonnsnnnnronnnnonnnnnnennnnonnrnnennennsnnnnnnnnnnnnnnnnnnnennnnnnnnennennnnnnn nenas 14 3 2 Leg eshonnidire actuel sipsipan aaa es a nd 16 3 3 Probl mes et critiques des valuations des modules 16 a e a E a eue 18 5 L organisation de l valuation en ligne sesessessesessessesssoesesoesessessesssseee 21 5 1 Sc nario pr vu avec la conseill re la formation nr 21 6 Le gu stionnaire en IgE isien iaa 23 6 1 Choix des questions et structure du questionnaire sn 23 O2 CROC OR 24 6 3 Elabo
179. uoi vous devez faire preuve pour la certification J J J Toutes les autres questions de cette partie se font de la m me mani re Troisi me partie La troisi me partie se nomme Evaluation des unit s Elle se compose de toutes les questions qui se rapportent aux unit s du module faut utiliser nouveau le type de question Matrice de choix seulement une r ponse par ligne On rajoute juste un point l chelle d appr ciation qui est Pas concern par cette unit car un tudiant qui participe un certain module ne participe pas forc ment toutes les unit s Quatri me partie La quatri me partie du questionnaire concerne les commentaires de l tudiant sur le module Elle se compose de 3 questions de type Commentaires zone de r daction Ce type de question permet l tudiant de taper une grande quantit de texte pour r pondre la question Il suffit d crire la question et de choisir la taille de la zone de texte 12 Quels sont selon vous les points forts du module Cinqui me partie Finalement la derni re partie du questionnaire en ligne s appelle Vos critiques par rapport l valuation en ligne Elle contient un petit texte qui explique quoi sert cette partie compl mentaire et contient 7 questions essentiellement sur l outil utilis la mise en page la clart la pr f rence des tudiant etc Yasmina Chapuis A 31 Annexes Pour les 6 premi res questions j ai ut
180. urs et tudiants envers le m dia utilis j ai explor ce qui se fait ailleurs pour pouvoir porter un regard critique sur la d marche entreprise J ai donc interrog d autres institutions Dans un premier temps il en ressort que l UNINE a une d marche qui fonctionne bien puisqu elle a un taux de retour tr s satisfaisant Le fait que les enseignants puissent construire les questionnaires d valuation est je trouve tr s int ressant car les r sultats sur le module sont utiles pour les enseignants c est pourquoi ils devraient pouvoir y contribuer l IFFP par contre les choses ne se passent pas aussi bien Le taux de retour est tr s bas et la d marche utilis e d montre de nombreux probl mes C est pourquoi il n est pas int ressant d approfondir ma r flexion sur cette institution Ce qui est int ressant la HEG GE est le fait que l institution utilise IS Academia ce qui permet aux tudiants de se connecter directement sur le site avec leur login et aux enseignants d aller chercher les r sultats eux m mes sur le site Dans un dernier temps l UNIGE a un outil EvaSys tr s int ressant car il a t cr e par l entreprise Electric Paper sp cialement pour les valuations des enseignements Il permet donc de construire des questionnaires adapt s de faire des envois multiples de questionnaires diff rents de donner des droits d acc s de faire toutes sortes d analyses et il a aussi une fonction qui permet de scann
181. us des probl mes avec la proc dure utilis e Comment pensez vous am liorer ce probl me Yasmina Chapuis A 11 Annexes 7 Synth se du fonctionnement des EEE dans d autres institutions Un Universit de Neuch tel UNINE Jean Fran ois Perret Objectifs D apr s la Loi sur l aide aux universit s LAU les universit s de Suisse doivent fournir des prestations d un haut niveau de qualit dans le domaine de l enseignement Dans ce sens la Conf rence universitaire suisse CUS donne une directive l UNINE lui demandant d entreprendre une d marche qualit sur l ensemble de ses activit s l enseignement la recherche et les cursus d tudes et d valuer les enseignements p riodiquement C est dans ce contexte qu un secteur Qualit a t cr e au sein de l Universit Son but tait de mettre en uvre des proc dures d valuation des cours enseignement aussi appel e appr ciation des cours par les tudiants Les objectifs de cette valuation des cours sont de permettre chaque enseignant de r unir des l ments d appr ciation qui lui soient utiles pour am liorer son enseignement de mettre en valeur les pratiques les plus stimulantes de favoriser l explicitation des crit res qui permettent de caract riser un enseignement de qualit de poss der un indicateur global concernant l valuation de l ensemble des cours par les tudiants et d analyser les besoins en formation Afin
182. utomatisation de la d marche plus simple rapide pratique et agr able plus facile de r pondre d effacer les erreurs c est plus ludique Avantages de grande conomie de papier point fort pour plus rapide plus cologique 3 Cf Termes et d finitions Yasmina Chapuis A 68 l valuation en ligne D savantages de l valuation en ligne Yasmina Chapuis l cologie gain de temps pour le d pouillement des r ponses traitement des donn es simplifi les tudiants peuvent r pondre chez eux ce qui leur permet de prendre le temps qu ils veulent pour r pondre les enseignants ne perdent plus de temps devoir distribuer les questionnaires en classe et les ramasser questionnaires sont envoy s directement la personne concern e et ne passe pas entre les mains d un enseignant ce qui est rassurant pour le respect de la confidentialit ils ne r pondent pas lors d un cours important avant les examens comme c est le cas avec les valuations papier pas tout le monde a forc ment acc s un ordinateur ou internet c est moins efficace car pas tout le monde est contraint de participer le temps pour r pondre est prit pendant le temps libre on ne voit pas la personne qui on doit retourner les questionnaires donc on ne peut pas poser de question c est plus facile de remplir les questionnaires sur place en classe que de le remplir la maison sur l ordinateur on ne peut pas not des c
183. velopper un ensemble de comp tences qui prennent en compte les facteurs sociaux culturels politiques institutionnels p dagogiques et psychologiques HEP Vaud www hepl ch PIRACEF Le Programme Intercantonal Romand de formation des enseignants en Activit s Cr atrices et en Economie Familiale PIRACEF est plac sous l autorit des recteurs des Hautes Ecoles P dagogiques de Suisse romande Ces formations s adressent des enseignants brevet s ou dipl m s qui souhaitent acqu rir en formation postgrade les connaissances et les comp tences n cessaires l enseignement des activit s cr atrices et de l conomie familiale dans l cole obligatoire PIRACEF www piracef ch Pluriannuel Qui porte sur plusieurs ann es Dictionnaire Sensagent dictionnaire sensagent com Proc dure Ensemble des r gles d organisation caract re administratif pour obtenir un certain r sultat Dictionnaire Sensagent dictionnaire sensagent com Qualtrics Service en ligne permettant de cr er des sondages Il peut g rer enti rement une campagne de la cr ation aux analyses en passant par la distribution O net www Olnet com Rapport d auto valuation HEP Yasmina Chapuis 58 66 Mise en ligne d un syst me d valuation des enseignements par les tudiants la HEP Vaud Lorsqu un module est valu par les tudiants les responsables de modules concern s sont charg s de fournir un bref rapport d auto valuation
184. vous ajouter vos destinataires O Ajouter des destinataires depuis le carnet d adresses Ajouter des destinataires manuellement Copiez collez les destinataires de votre liste un destinataire par ligne Si vous importez d autres champs s parezes par des virgules et suivez les directives ci dessous REMARQUE les adresses en double seront automatiquement cart es Une confirmation d ajout de destinataires appara t en vert Passons pr sent la cr ation du message Cliquer sur Cr er un message envoyer Nouvelle invitation par courrier lectronique Modifier invitation par courrier lectronique PAS CONFIGUR CROIX des destinataires du message Enregistrer la s laction et continuer La premi re tape de la cr ation de votre message est le choix des destinataires Vous pouvez opter pour l un des filtres de liste standard ou cr er votre propre filtre personnalis qui doit tre envoy le message Nouveau Non envoy envoy tout le monde n ayant pas encore re u de message lectronique Q Pas de r ponse envoy toutes les personnes ayant re u un message lectronique mais n ayant pas encore r pondu 7 R pondu envoy toutes les personnes ayant partiellement et ou enti rement r pondu Q Toutes les adresses de courrier lectronique envoy toutes les personnes de votre liste qu elles aient r pondu ou non M Crit res personnalis s envoy toutes les personne

Yasmina CHAPUIS

Contents

Download Pdf Manuals

Related Search

Related Contents