Passer au contenu principal

Comment fonctionne l’évaluation par l’IA dans les Simulations immersives

Découvrez comment l’IA évalue les comportements des apprenants et génère les résultats dans les Simulations immersives.

Les Simulations immersives utilisent l’IA pour évaluer la manière dont un apprenant applique ses connaissances et son jugement tout au long de sa conversation avec un avatar optimisé par l’IA. L’évaluation s’appuie sur les comportements et les critères d’évaluation configurés pour la simulation, ainsi que sur les éventuelles consignes de calibrage fournies par un administrateur.

L’IA évalue la conversation dans son ensemble plutôt que de juger une réponse de manière isolée. L’apprenant n’a pas à suivre un script unique prédéfini.

Les éléments qui guident l’évaluation par l’IA

Avant de publier une simulation, un administrateur vérifie ou ajuste :

  • Les comportements professionnels que la simulation doit évaluer

  • Les critères d’évaluation de chaque comportement, notamment la réponse minimale attendue pour le démontrer, les éléments à améliorer et ce qui peut caractériser une excellente performance

  • Si chaque comportement est marqué comme Requis

  • Les éventuelles consignes de calibrage supplémentaires, afin d’aider l’IA à appliquer les critères d’évaluation de manière cohérente

Lorsqu’un apprenant termine la simulation publiée, l’IA utilise les critères associés aux comportements et les consignes de calibrage configurés pour évaluer sa conversation.

Comment la conversation est évaluée

  1. L’apprenant répond à l’avatar à l’oral ou par écrit. L’avatar réagit en fonction de ce que dit l’apprenant.

  2. À la fin de la simulation, l’ensemble de la conversation de l’apprenant est évalué au regard de chaque comportement configuré.

  3. L’IA applique les critères d’évaluation et les éventuelles consignes de calibrage afin de déterminer un résultat et de générer des commentaires pour chaque comportement.

  4. Les comportements marqués comme Requis déterminent le résultat global de l’apprenant. Celui-ci reçoit également des commentaires généraux sur sa performance dans l’ensemble de la simulation.

L’évaluation tient compte des éléments recueillis tout au long de la conversation. Une phrase isolée ou la dernière réponse de l’apprenant n’est pas évaluée séparément.

Incidence des comportements requis sur le résultat global

Chaque comportement reçoit son propre résultat et ses propres commentaires. L’apprenant reçoit également un résultat global et des commentaires généraux pour la simulation. Toutefois, seuls les comportements marqués comme Requis influencent le résultat global.

Pour obtenir le résultat global Compréhension démontrée, l’apprenant doit démontrer tous les comportements requis. Si l’un d’eux obtient le résultat À améliorer, le résultat global est également À améliorer.

Un comportement non requis est tout de même évalué et affiché dans les résultats. Son résultat n’a aucune incidence sur le résultat global.

Par exemple :

Comportement

Requis

Résultat du comportement

Incidence sur le résultat global

Prendre en compte la préoccupation

Oui

Compréhension démontrée

Oui

Déterminer une prochaine étape appropriée

Oui

Compréhension démontrée

Oui

Proposer un suivi supplémentaire

Non

À améliorer

Non

Dans cet exemple, le résultat global de l’apprenant est Compréhension démontrée car il a démontré tous les comportements requis. Les résultats indiquent néanmoins que le comportement supplémentaire doit être amélioré.

Comprendre les résultats de la simulation

Les résultats de la simulation comprennent :

  • Résultat global et commentaires : un résultat global Compréhension démontrée ou À améliorer, fondé sur les comportements requis, accompagné de commentaires résumant la performance de l’apprenant dans l’ensemble de la simulation

  • Résultats et commentaires par comportement : un résultat et une explication pour chaque comportement évalué, y compris les comportements non requis

Ensemble, ces résultats présentent la performance globale de l’apprenant et indiquent les domaines dans lesquels il a démontré sa compréhension ou doit encore progresser.

Ce que l’IA ne décide pas

L’IA applique les critères d’évaluation et les consignes de calibrage configurés pour la simulation. Elle ne définit pas les attentes de votre organisation et ne décide pas de l’utilisation qui doit être faite d’un résultat.

Important : l’IA ne fournit pas de conseils juridiques et ne prend aucune décision définitive en matière d’emploi. Les résultats des simulations sont destinés à soutenir l’apprentissage et le développement et doivent, si nécessaire, être examinés par une personne compétente.

Qui peut consulter les résultats ?

Une fois la simulation terminée, l’apprenant et les administrateurs de son organisation peuvent consulter :

  • Le résultat global et les commentaires associés

  • Le résultat et les commentaires associés à chaque comportement évalué

Les administrateurs voient les mêmes résultats d’évaluation et les mêmes commentaires que l’apprenant. Ils ne peuvent pas consulter la transcription de sa conversation.

Consultez la politique de confidentialité de Go1 pour en savoir plus sur le traitement des informations personnelles.

Avez-vous trouvé la réponse à votre question ?