background preloader

MOOC: une typologie des méthodes d’évaluation

MOOC: une typologie des méthodes d’évaluation
Nous ne le soulignons jamais assez, la pédagogie active est au cœur des MOOC ; c’est ce qui les distingue du format Open Courseware, dont l’essor remonte à plus d’une décennie. Dans les xMOOC proposant une certification, l’évaluation joue un rôle central. Se pose donc une question de taille : Comment évaluer des milliers de participants avec les moyens limités d’une équipe pédagogique ? Nous ferons ici un rapide tour d’horizon des différentes méthodes utilisées, en nous concentrant sur l’évaluation automatisée d’une part et l’évaluation par les pairs d’autre part. L’évaluation automatisée recouvre un large éventail de techniques. Elle se base sur des outils assez rudimentaires comme les questionnaires à choix multiples ou les textes à trous aussi bien que sur des techniques plus avancées comme les programmes de test de codes ou d’évaluation automatisée de copies. Les exercices d’application ont une fonction tout autre. Related:  MOOCwebgs_m2efen

mooc.org MOOC: comment aider les enseignants qui se lancent? L’organisation d’un MOOC demande beaucoup de temps ainsi qu’une grande diversité de compétences, allant de la pédagogie à la gestion de projet. Dans ces conditions, on comprend qu’il soit difficile voire impossible d’en organiser seul. Il faut donc recruter une petite équipe motivée et compétente. Et c’est là que commencent les ennuis. Qui recruter ? Comment rémunérer les uns et les autres, à commencer par les enseignants ? Commençons par regarder du côté de nos voisins, et en particulier de l’Ecole Polytechnique Fédérale de Lausanne. Cet argent est utilisé pour assister l’enseignant pour la partie de gestion de projet et pour la partie technique de la création du cours. Disons qu’il y a quelques complications. Compte tenu du fait qu’il va contribuer d’une manière significative à la réputation de l’établissement, un minimum de rétribution est de mise. Si l’enseignant compte ses heures et s’arrête dès qu’il a atteint son quota, cela risque de poser problème.

Fiche-Mission: le responsable de la conception des évaluations du MOOC Nous allons discuter aujourd’hui de la question de la répartition des tâches au sein de l’équipe pédagogique. Nous avons abordé la question dans plusieurs billets (cf. MOOC: comment aider les enseignants qui se lancent?), en nous attardant notamment sur le rôle de chef de projet et de community manager (L’organisation d’un MOOC: un travail d’équipe). Nous n’avons cependant pas beaucoup discuté d’un des rôles-clef de l’équipe, celui de concepteur des évaluations. Pour la première session du MOOC Gestion de Projet, trois membres de l’équipe ont eu uniquement pour rôle de mettre au point les devoirs et examens. Le choix des objectifs pédagogiques est à la charge de l’enseignant, le rôle du responsable des évaluations est uniquement de concevoir des exercices d’application pour répondre à ces objectifs. Pour chacune des six semaines que dure le cours, le responsable des évaluations doit concevoir une série d’exercices automatisés ainsi qu’un devoir qui sera corrigé par les pairs.

ITyPA, un Mooc vu dans les coulisses | ou comment s'est monté ce Mooc MOOC Testing - Setting Standards So the good news is that massive courses have the technology and the audience needed to generate massive (or “Big”) data, enough data to give course developers the statistics they need to refine and revise testing so that it more capably screens those who know from those who don’t. And, if combined with some of the test-planning and item-writing principles outlined earlier this week, each generation of MOOC-delivered assessments can be better than the last. But just as quality can be assigned to test questions, it can also be assigned to data. And we need to temper our enthusiasm for this use of “Big Data” with an understanding of some of the quality issues related to data derived from thousands of people taking tests in hundreds of differing environments. Most students don’t realize it, but when they take the SAT at least one section of the exam does not count for their score.

La frénésie MOOC : quand l’innovation est contre-révolutionnaire | BibliOpen (Riff a GIF of David Kernohan’s Day of the MOOC poster for the Horror of the MOOCs assignment) On assiste depuis plusieurs mois à un véritable déferlement médiatique sur les MOOCS (Massive online open courses), CLOMS en français (cours en ligne ouverts et massifs). Mais qu’en est-il réellement de ce dispositif anglo-saxon lorsqu’on le considère dans l’environnement français de l’enseignement supérieur ? Vous avez dit MOOCS? Quelque soit le type de MOOC mis en place (cMOOC ou xMOOC : individuel ou collaboratif) on ne peut pas considérer que ce dispositif puisse à lui seul être à même de révolutionner la pédagogie universitaire. Les MOOCS restent à ce stade, sur le plan pédagogique, une potentialité pour les enseignants et les étudiants. Au delà de l’innovation, la rénovation pédagogique Comme le précise Matthieu Cisel dans son guide du MOOC, le préalable à la fabrication d’un Mooc nécessite la constitution d’une équipe pédagogique que nous qualifierions « d’étendue ». Ne nous trompons pas.

Droit à l'image et droit de l'image L’utilisation croissante de l’informatique et de l’internet implique une utilisation croissante d'images confectionnées par les établissements ou captées par scanner ou réseau. Introduction Le cadre juridique touchant l’image est complexe, car il fait intervenir plusieurs corpus juridiques : droit pénal, droit civil, droit de la propriété intellectuelle, droit administratif. Les responsables pédagogiques et juridiques des établissements doivent tenir compte de l’ensemble des interactions entre les acteurs du système pour garantir l’institution et ses responsables, ainsi que les usagers du service, dans leurs droits. Il s’agit donc de définir les connaissances à avoir pour développer une culture professionnelle par rapport à l’utilisation d’images, celle-ci ne se faisant pas uniquement dans le cadre des technologies de l’information. Les technologies de l’information n’ont dans les faits rien et tout modifié. I – Risques juridiques liés l’utilisation illégale ou irrégulière de l’image

Scénarisation pédagogique, 5ème partie : l'évaluation L'évaluation est un passage obligé dans tout dispositif de formation. L'évaluation permet de donner une valeur au niveau d'acquisition des compétences et des connaissances de l'apprenant. Ce thème, s'il est un terrain de réflexion permanent, est revenu au centre des attentions avec l'arrivée des nouveaux outils numériques qui offrent de nouvelles possibilités et de nouvelles perspectives en termes d'apprentissages. L'évaluation au service de l'apprenant L'apprenant cherche à atteindre les objectifs pédagogiques à travers les activités qui lui sont proposées. L'évaluation au service du pédagogue L'intérêt pour le pédagogue est double selon que l'on s'intéresse à l'évaluation de l'apprenant ou à l'évaluation du dispositif de formation lui-même. En ce qui concerne l'évaluation , le pédagogue cherche à accompagner l'élève sur la voie de la réussite. Les choix d'évaluation Il est courant de distinguer 4 types d'évaluation : diagnostiqueformativesommativecertificative Références

MOOC Testing - Test Statistics I hope I’ve not lost too many people as this week’s series dove into some of the more technical aspects of testing. It’s just that, having spent so many years in both the professional testing and education industries, it struck me how some of the principles of the former could really improve the quality of the latter. This is especially true in the world of MOOCs where (1) huge classes can only work if most of the class components are automated; (2) the quality of automated test questions is based entirely on how well those questions are conceived and written; and (3) MOOCs can generate the type of “Big Data” needed to determine how well tests and test items are performing. I’ll be returning to the subject of “Big Data” over the course of the year since many MOOC providers see the data they are gathering as one of the primary benefits of the entire MOOC experiment. The first statistical analysis technique most of us are familiar with is norming. Item #3 is actually a near perfect item.

Related:  TICEMOOC