Dans un questionnaire, il peut y avoir deux types de tags :
Les tags de questions non soft skills
Les tags des réponses de questions soft-skills
Les tags de questions permettent de construire des scores par tag, qui donneront une analyse fine des résultats. Ils permettent aussi de retrouver des questions en les filtrant par tag.
Les tags de réponse, qui ne concernent que les questions soft-skills, ont un usage un peu différent: ils permettent d’élaborer des scores de soft-skills, chaque réponse choisie contribue à renforcer le score sur le ou les tags que portait cette réponse.
Dans les options du questionnaire, il était possible déjà de sélectionner les tags de questions à afficher dans la page de résultats. Cette fonctionnalité est maintenant proposée pour les tags des questions soft skills.
Il faut choisir l’option “Afficher les tags dans la page de score” puis cocher “Non” [1] pour l’option “Tous les tags” et enfin choisir les tags à afficher. Deux boutons [2] permettent de supprimer tous les tags (poubelle) ou de les réinitialiser.
Si on restreint la liste des tags aux 3 tags suivants :
La page de scores ne présente que cette liste restreinte.
La conception de questions est souvent chronophage. Écrire la question avec sa réponse correcte est relativement facile pour un expert, mais la rédaction de distracteurs (réponses fausses) est un exercice difficile. La fonction de génération de réponses assistée par l’IA permet d’accélérer cette étape.
Lorsque vous rédigez une nouvelle question de type unique ou multiple [1], vous pouvez maintenant écrire le texte de la question [2] puis cliquer sur le bouton Générer des réponses [3].
Après recherche, des réponses sont proposées.
Si dans les réponses proposées par l’IA, certaines correspondent à notre attente et d’autres pas, alors il suffit de supprimer celles qui ne conviennent pas et de demander de générer à nouveau des réponses. L’IA conservera ce qui est déjà complété et fera de nouvelles propositions pour les réponses vides.
Lorsque les réponses conviennent, on peut enregistrer la question.
ExperQuiz propose un type de question qui est corrigée par un formateur de façon asynchrone : c’est la question libre. Le correcteur peut rédiger une appréciation et affecter une note qui est réintégrée dans la note globale de l’évaluation.
ExperQuiz utilise l’intelligence artificielle pour analyser le texte proposé comme réponse et pour suggérer des commentaires et une note.
Le correcteur peut accepter tout ou partie des suggestions et conserver la note s’il juge que les suggestions sont pertinentes. Notez qu’il s’agit seulement d’une aide proposée au correcteur qui doit toujours définir son commentaire ainsi que la note à attribuer, dont il est au final le seul responsable.
Chaque suggestion est uniquement basée sur le texte de la question et celui de la réponse. Aucune image / média / pièce-jointe n’est prise en compte lors de la génération de la correction de l’attribution de la note.
Pour activer cette fonctionnalité, il faut préciser dans les paramètres de la question qu’il y aura une demande d’aide à la correction.
Lorsque l’évaluation est terminée, la correction automatique est appelée. Cela peut prendre quelques minutes. Ce qui n’empêche pas le correcteur d’aller voir les réponses et de commencer son analyse.
Il est impératif de vérifier la qualité des suggestions en fonction de la réponse de l’utilisateur.
Notez que, de par sa construction, l’IA sera probablement moins pertinente sur des sujets d’actualité récents ou non accessibles au grand public.
Considérant la question libre [1] suivante :
Dans le panneau “PLUS DE PARAMÈTRES”, il est possible d’indiquer que l’on souhaite la correction assistée par l’IA [2] en se basant sur l’explication [3] qui se trouve dans le bloc « Explication » de la question [4].
Lorsqu’une évaluation est passée, le correcteur pourra consulter la réponse donnée et l’explication fournie par l’IA comme suggestion de correction.
La partie générée par l’IA comporte une rédaction de la correction avec relevé des points corrects et des erreurs. Elle propose également une note.
Le bouton 1 permet de recopier la correction suggérée par l’IA dans la partie “Correction” du correcteur qui pourra l’adapter selon son jugement.
Le bouton 2 permet de recopier la note proposée par l’IA.
Activer la fonctionnalité
Pour activer les fonctionnalités qui utilisent l’intelligence artificelle, il faut cocher l’option “Utiliser des fonctionnalités sur l’IA” dans les réglages de l’entreprise.
Personnaliser l’assistant de correction
Vous pouvez personnaliser votre assistant et ainsi donner des instructions de correction spécifiques, qui s’appliqueront à la correction par IA des questions libres de cette base, lorsqu’elles ont l’option de correction automatique activée.
Pour cela, rendez vous sur la page “Intelligence Artificielle” dans l’onglet “Correction des questions”.
Par exemple vous pouvez indiquer :
Faire une correction bienveillante en soulignant les points positifs. Si la réponse est plutôt juste, terminer votre correction par des félicitations sinon donner quelques conseils encourageants.
Si vous ne donnez pas d’instructions spécifiques, les questions libres pourront être corrigées en appliquant les instructions standard définies par la plateforme.
La génération de questions n’est plus limitée aux seules connaissances “universelles” déjà ingérées par OpenAI, mais peut cibler également des connaissances propres à l’entreprise. Vous pouvez ajouter à votre corpus un règlement intérieur, la documentation d’un produit, le support d’une formation, etc.
Choix du corpus documentaire
L’administrateur peut définir son propre corpus documentaire, à partir duquel les questions seront générées. Cela permet de personnaliser et de circonscrire les sources d’informations sur lesquelles l’IA générative s’appuiera pour créer les nouvelles questions.
Pour cela :
Aller sur la page “Intelligence Artificielle” de la base choisie.
Puis dans l’onglet “Corpus documentaire”.
Sélectionner les documents au format doc, docx, html, pdf, pptx. Les documents sont choisis parmi ceux de votre médiathèque, mais vous pouvez en importer de nouveaux si besoin.
Enregistrer la sélection de documents avant de quitter la page.
Génération des questions
La génération de questions se paramètre en s’appuyant ou non sur tout ou partie des documents.
Pour cela :
Aller sur la page “Intelligence Artificielle” de la base choisie
Puis sur l’onglet “Générateur de questions”.
La liste des documents du corpus est présentée en haut de page. Sélectionner le ou les documents à utiliser pour la création de question. Cliquer sur les documents pour les sélectionner ou les dé-sélectionner.
Donner l’énoncé ou le sujet, qui peut être un chapitre ou le titre du document
Choisir le type de question souhaité
Sélectionner la langue
Indiquer le nombre de questions
Démarrer la génération en cliquant sur le bouton “GÉNÉRER”
Validation des questions générées
La génération démarre, un message indique qu’elle est en cours [1], [2].
Les questions sont générées au fil de l’eau et l’administrateur peut :
Accepter la question en mode brouillon afin de l’adapter
Valider la question qui rejoint l’ensemble des questions qui peuvent composer un questionnaire
Rejeter la question
On retrouve la question acceptée [1] dans la liste des questions de la base, elle est soit active, soit en mode brouillon [2].
Pour l’intégrer dans les questionnaires, l’administrateur peut éditer la question [3] ou consulter son contenu en ouvrant le panneau de détail [4].
L’IA a également généré une explication qui sera utilisée dans le feedback donné à l’utilisateur pendant son test si cette option a été choisie.
RGPD, Sécurité et confidentialité
Cette fonctionnalité repose sur les API d’OpenAI. Votre énoncé et les fichiers de corpus seront envoyés à OpenAI.
ExperQuiz présente une vue statistique dans la page des questions. On peut ainsi consulter le nombre de fois où une question a été soumise, son taux de réussite, le temps moyen passé pour y répondre, le nombre de hors délai (lorsque le participant n’a pas eu assez de temps pour y répondre).
Pour cela, il faut choisir sa base [1], aller sur l’onglet des questions [2] et filtrer sur la vue statistiques [3].
Il s’agit d’un historique qui cumule les données dans le temps.
Il est possible de réinitialiser ces statistiques en cliquant sur le bouton “Réinitialiser les statistiques” [4]
Un nouveau type de question est proposé : il s’agit de la question “section”, qui permet de structurer un questionnaire en groupant les questions par section, les sections étant séparées par une sorte d’intercalaire.
Définir une question de type section
La question “section” permet, comme son nom l’indique, de créer des sections dans un questionnaire. C’est une “pseudo-question”, dans le sens où elle ne présente pas de réponses proposées, et elle ne sera pas notée. Son rôle est de séparer des groupes de questions à l’intérieur d’un même questionnaire.
Comme toute question, elle a un titre [2] et un énoncé [3] qui peut être du texte et/ou un média [4]. Mais elle n’a pas de réponses à proposer.
Si la base thématique a défini des tags, des séquences, explication ou règle, ces informations peuvent être également renseignées dans la question section.
Exemple
Un questionnaire peut contenir plusieurs sections pour séparer, par exemple, les sous thématiques.
Dans l’exemple ci-dessous, le questionnaire contient deux questions sections (#44 et #45). Les questions sections permettent d’apporter des explications, ou de situer le contexte des questions à venir, avant de commencer une nouvelle série de questions.
Paramétrage du test
Lorsque le test commence, la question section se présente comme une question normale avec un chrono si le paramétrage du test l’a prévu ainsi.
Un point important: si le paramétrage du test prévoit que les questions sont mélangées, alors le mélange se fera en respectant les sections c’est-à-dire que les questions seront mélangées entre les sections, mais ne changeront pas de section.
Cas particulier du questionnaire dynamique
Le questionnaire dynamique est un questionnaire dont les questions sont choisies aléatoirement en respectant certains critères comme:
Le niveau de difficulté
Le nombre de questions par domaine (sous thématique)
Le nombre de questions indiqué par domaine inclut les questions de type “section”.
Les questions de type « section » ne seront pas choisies dans les questionnaires dynamiques, sauf si elles font partie d’une séquence de questions qui est présente dans le tirage de questions. En effet, dans le tirage aléatoire, une séquence de questions est incluse dans son intégralité.
Résultats du test
La page de score présente les réponses aux questions données en matérialisant les sections présentes dans le test.
Vous pouvez créer des questions dans un fichier bureautique et ExperQuiz les chargera.
Cela favorise la production des questions puisque vous pouvez éditer beaucoup de questions à la fois, faire des couper-coller de parties de cours et intégrer des textes déjà formatés.
Dès que vous avez créé un lot de questions, vous pouvez les télécharger. Les questions seront lues et ajoutées aux questions existantes.
Si un problème survient à la lecture du fichier, ExperQuiz présentera précisément les problèmes afin que vous puissiez corriger le fichier.
Le format du fichier de questions
Nous utilisons des fichiers de format DOCX. Ces fichiers peuvent être créés et édités en utilisant des logiciels LibreOffice, Google Docs, ou Microsoft Office.
Dans le document, vous trouverez plusieurs aides que vous pourrez suivre pour écrire correctement vos questions.
La meilleure façon de faire est de charger le fichier exemple, en utilisant le lien ci-dessous, puis de l’ouvrir.
Le fichier contient à la fois des explications et des conseils ainsi que des exemples de questions.
Fichiers existants et portabilité
Si vous disposez de fichiers de questions dans un autre format que celui d’ExperQuiz, contactez-nous en utilisant le formulaire de contact présent dansla page d’accueil. Nous disposons de beaucoup d’outils de transfert qui faciliteront la portabilité.
