Ce qui prend le plus de temps dans la conception d’un exercice, ce n’est pas la rédaction de l’énoncé, mais de déterminer « quel niveau cette question doit évaluer ». Prenons un point de connaissance concret comme exemple et déroulons entièrement la logique de conception par niveaux.
Exemple de point de connaissance : supposons qu’il s’agisse du « tableau croisé dynamique Excel » (remplacez par n’importe quel point de connaissance d’un cours, la logique reste la même).
Niveau 1 : question de mémorisation de base — à utiliser comme filet de sécurité
Méthode : Fournir un petit tableau de données et demander « de calculer les ventes par région et par mois, puis de les trier ». Le point évalué est l’opération elle-même : les étapes sont standard et tout le monde peut obtenir des points.
Intention de conception : Le rôle de la question filet de sécurité est de vérifier que « tout ce qui a été enseigné a été abordé ». Le taux de réussite des étudiants sur cette partie devrait être proche de 100 % — si même les questions filet de sécurité entraînent des pertes de points massives, le problème vient de l’enseignement, pas de la conception des questions.
Niveau 2 : question d’application avancée — à utiliser pour créer des écarts
Méthode : Changer de contexte — « Vous êtes responsable des opérations d’un magasin ; voici un flux brut contenant des valeurs manquantes ; nettoyez-le d’abord, puis réalisez un tableau croisé dynamique et expliquez pourquoi vous avez effectué ce regroupement. » On évalue toujours le tableau croisé dynamique, mais en y ajoutant du jugement : les données doivent être traitées et le regroupement doit être justifié.
Intention de conception : Vérifier si les connaissances peuvent être transférées à une situation inédite. Ce niveau constitue le corps principal des devoirs.
Niveau 3 : question d’analyse stimulante — à utiliser pour différencier
Méthode : Fournir deux sources de données dont les définitions ne concordent pas et demander « d’identifier les causes des écarts, de concevoir une solution de tableau croisé dynamique capable de répondre aux besoins des deux services et de signaler les défauts de la solution d’origine ».
Intention de conception : Combiner plusieurs points de connaissance et y ajouter un jugement critique afin de séparer les étudiants les plus avancés du niveau intermédiaire. C’est ce niveau qui demande le plus de travail pour rédiger l’énoncé et construire les données ; on peut aussi demander à muchsci de générer d’abord un brouillon selon les exigences de niveau, puis de le corriger manuellement — une seule question de ce type dans une ou deux séries de devoirs suffit, pas davantage.
Combien de temps faut-il pour concevoir manuellement trois niveaux de questions ?
Selon la décomposition ci-dessus, trois niveaux de questions pour un point de connaissance exigent : concevoir les énoncés, fournir les données, rédiger les corrigés et vérifier la progression de la difficulté — soit une demi-journée pour un ensemble. Avec une dizaine de chapitres de points de connaissance par semestre, le calcul est vite fait.
muchsci prend en charge cette chaîne de production : on saisit le point de connaissance et le niveau d’évaluation visé, et l’outil produit des questions de difficultés variées, chacune accompagnée d’un corrigé ; l’enseignant passe de « la rédaction de questions » à « la sélection et à l’assemblage de questions », et le coût de production de la conception par niveaux baisse considérablement. La logique de conception par niveaux reste inchangée, mais le coût de l’étape de production diminue fortement.
Répartition des trois niveaux de questions selon les contextes
| Contexte | Combinaison recommandée |
| --- | --- |
| Devoirs quotidiens | Principalement le niveau de base + 1 question avancée, pour limiter la charge du soir |
| Quiz en classe | Niveau de base pour une vérification rapide, avec retour immédiat en classe |
| Examen final | Combiner les trois niveaux selon des proportions définies pour garantir le pouvoir discriminant |
L’essence de la conception de questions par niveaux, c’est l’équité envers des étudiants de niveaux différents : permettre aux étudiants les plus faibles d’atteindre l’objectif et aux meilleurs d’atteindre le plafond. Après avoir gagné du temps sur la rédaction des questions grâce à muchsci, l’énergie supplémentaire peut précisément être consacrée au jugement lié à « la sélection des questions » — avant de donner les prochains devoirs, il peut être utile de se demander : dans cette série de questions, qu’a obtenu chaque niveau d’étudiant ?