Qu'est-ce que la validation des évaluations et pourquoi en avez-vous besoin ?
Découvrez le concept de validation des évaluations et comprenez son importance pour améliorer la précision des évaluations. Découvrez pourquoi c'est indispensable pour votre RTO.
Si vous travaillez dans le secteur australien de l'enseignement et de la formation professionnels (EFP), vous devrez respecter un certain niveau lors de l'évaluation des compétences de vos étudiants. Ce n'est pas seulement quelque chose que vous faites pour maintenir votre réputation, mais c'est aussi une exigence fixée par l'Australian Skills Quality Authority (ASQA).
La validation des évaluations est un élément essentiel de cette norme. Il contient certaines directives que vous devez suivre en tant que organisme de formation enregistré (RTO) ou une entreprise de formation professionnelle. Dans ce guide, nous abordons tout ce que vous devez savoir sur la validation des évaluations.
Qu'est-ce que la validation des évaluations ?
La validation de l'évaluation est un processus par lequel vous confirmez la qualité et la cohérence de vos outils, méthodes et processus d'évaluation. Le Normes pour les RTO, définies par l'ASQA, exigent que tous les RTO soient conformes aux principes de validation des évaluations. Cela garantit la validité, la fiabilité, l'équité et la flexibilité de vos évaluations.
Clause 1.8a de la Normes pour les RTO indique que les systèmes d'évaluation du RTO devraient être conformes aux exigences des cours ou modules de formation accrédités par l'EFP correspondants.
Entre-temps, la clause 1.8b exige que les RTO respectent ces règles.
Les Règles de preuve sont les points de référence utilisés pour juger si un candidat est compétent dans un domaine de compétence ou de connaissances particulier. Ils sont décrits dans chaque module de formation et doivent être suivis par le RTO lors de l'élaboration d'outils et de processus d'évaluation. Ces règles incluent :
Validité: L'outil d'évaluation doit mesurer ce qu'il est censé mesurer.
Suffacité: Les preuves recueillies doivent être suffisantes pour prouver la compétence du candidat.
Authenticité: Les preuves doivent être le propre travail du candidat.
Devise: Les preuves doivent démontrer les connaissances et les compétences actuelles conformément aux normes de l'industrie.
Fiabilité: L'outil d'évaluation doit produire des résultats cohérents pour les différents candidats.
Principes de l'évaluation
Le Principes de l'évaluation définir les principes clés à suivre lors de la conception et de la mise en œuvre de l'évaluation dans le domaine de la formation professionnelle. Ils incluent également l'équité, la flexibilité, la validité et la fiabilité. Ces principes exigent également que l'évaluation fasse partie du processus d'apprentissage et ne soit pas simplement une évaluation finale. Les étudiants devraient également recevoir des commentaires clairs et opportuns sur leurs performances afin d'améliorer leur expérience d'apprentissage.
Que comprend la validation de l'évaluation ?
Selon les normes pour les RTO 2015, la validation de l'évaluation comprend les éléments suivants :
Examen d'un échantillon (statistiquement valide) des jugements d'évaluation portés par les évaluateurs pour chaque qualification ou produit de formation inclus dans le champ d'application
Recommandation d'améliorations futures pour l'outil d'évaluation
Suite donnée aux recommandations
Améliorer le processus d'évaluation
Il est recommandé d'utiliser une approche d'échantillonnage aléatoire stratifié lors de la sélection des candidats pour la validation de l'évaluation. La méthode consiste à classer les étudiants en groupes distincts, tels que les apprenants sur le campus, les stagiaires en milieu de travail et ceux faisant l'objet d'une reconnaissance des acquis (RPL), puis à sélectionner au hasard un échantillon représentatif de chaque catégorie pour un examen approfondi. Au fil du temps, tous les évaluateurs, outils d'évaluation, et les méthodes devraient être intégrées à l'échantillon pour une validation complète. Lorsque vous sélectionnez un échantillon pour la validation de l'évaluation, vous pouvez tenir compte des facteurs suivants :
Chiffres d'inscription des étudiants dans les différents programmes de formation
Étendue de la formation dispensée au sein de l'organisation
Feedback des principales parties prenantes, notamment des étudiants, des formateurs et des clients
Plaintes enregistrées, formelles et informelles
Taux d'achèvement des cours
Évaluation des risques associés à un produit de formation spécifique
Modes de fourniture d'évaluations, tels que les environnements simulés, les évaluations basées sur le lieu de travail ou la RPL
Mise en œuvre de nouveaux outils ou activités d'évaluation
Introduction de nouveaux programmes de formation
Engagement de nouveaux évaluateurs
Ce ne sont cependant pas les seuls facteurs à prendre en compte. Vous pouvez également intégrer d'autres critères spécifiques à votre organisation ou à vos programmes de formation.
Pourquoi la validation des évaluations est-elle importante ?
Vous pouvez considérer la validation de l'évaluation comme un contrôle de qualité pour l'ensemble du processus d'évaluation. Cela permet de s'assurer que ce qui est évalué est juste et cohérent et qu'il mesure réellement ce qu'il est censé faire.
Sans validation, il existe un risque réel que les évaluations soient trop faciles, trop difficiles ou ne correspondent tout simplement pas aux attentes du secteur, ce qui n'est pas idéal pour les étudiants, les employeurs ou les organismes de formation. L'objectif de la formation professionnelle étant de préparer les étudiants à entrer sur le marché du travail, la validation des évaluations permet de contrôler leurs compétences réelles. Cela garantit que les évaluations reflètent les tâches réelles auxquelles ces apprenants seront confrontés dans le cadre de leurs emplois respectifs. Plus important encore, pour les RTO, la validation de l'évaluation est un élément non négociable de la conformité aux normes relatives aux RTO. La validation permet également de détecter les faiblesses des outils ou des processus d'évaluation avant qu'elles ne deviennent des problèmes plus importants. Si vous n'effectuez pas de validations régulières, vous ne saurez pas si vos évaluations sont efficaces avant qu'il ne soit trop tard et que les étudiants aient déjà subi de graves conséquences.
Qui procède à la validation de l'évaluation ?
La validation de l'évaluation doit être effectuée par des personnes possédant les connaissances et l'expérience appropriées pour effectuer des validations efficaces et significatives. Ces personnes peuvent inclure :
Membres du personnel qui n'ont pas participé au processus d'évaluation initial
Des évaluateurs qualifiés possédant une expérience pertinente dans le secteur
Experts en la matière ou auditeurs externes
Représentants du secteur
La personne chargée de la validation doit bien comprendre les exigences de l'évaluation. Ils devraient également être familiarisés avec les pratiques et les normes de l'industrie. S'il existe des exigences réglementaires spécifiques pour l'industrie, celles-ci doivent également être prises en compte lors du processus de validation.
Comment effectuer une validation d'évaluation efficace ?
En tant que RTO, voici un guide étape par étape sur la manière de procéder à une validation d'évaluation efficace.
Étape 1 : Création d'un calendrier de validation
Tout d'abord, vous devez élaborer un calendrier de validation qui indique quand et à quelle fréquence les validations seront effectuées. Vous pouvez vous baser sur le calendrier de formation et d'évaluation de votre organisation. S'il existe des exigences réglementaires, gardez-les également à l'esprit. Le calendrier doit également inclure les évaluations spécifiques ou les programmes de formation qui seront validés à chaque session. L'ASQA a reconnu certains risques systémiques avec la formation professionnelle dans certains domaines, notamment la construction, l'éducation de la petite enfance, les soins aux personnes âgées et communautaires, etc. Pour rencontrer Article 1.10, vous devrez effectuer des validations plus fréquemment dans ces domaines.
Étape 2 : Création d'un plan de validation
Dans ce plan, vous devez inclure les éléments suivants :
Étendue de la validation:Incluez les évaluations ou les programmes de formation spécifiques qui seront validés, ainsi que le calendrier et les éventuelles exigences réglementaires.
Membres de l'équipe concernés : Mentionnez les membres de l'équipe qui seront impliqués dans le processus de validation et leurs rôles respectifs.
Méthodes de validation : Décrivez les méthodes qui seront utilisées pour la validation, telles que les observations, les entretiens et l'examen des documents d'évaluation.
Collecte et analyse des données : Spécifiez comment les données seront collectées lors de la validation.
Étape 3 : Sélectionnez un échantillon
Comme nous l'avons expliqué plus haut, l'échantillon doit être statistiquement valide. Il doit refléter la diversité au sein de la cohorte et couvrir toutes les unités de compétence du module de formation.
Étape 4 : Enregistrer les preuves de validation de l'évaluation
Gardez une trace des preuves recueillies au cours du processus de validation, telles que les formulaires d'observation, les notes d'entretien, les documents d'évaluation et les commentaires écrits des évaluateurs et des apprenants. Assurez-vous que les preuves sont conformes aux règles de preuve et aux principes d'évaluation.
Étape 5 : Analyser les résultats
Après avoir collecté et enregistré les preuves de validation, analysez les résultats. Recherchez dans les données tout modèle ou tendance susceptible d'indiquer des domaines à améliorer.
Tenez compte des commentaires des évaluateurs et des apprenants pour identifier les changements potentiels qui pourraient être nécessaires dans le processus d'évaluation.
Étape 6 : Implémenter les modifications
Suivez ensuite les recommandations pour apporter des améliorations. Par exemple, vous pouvez :
Mettre à jour les outils ou les processus d'évaluation
Fournir une formation ou un soutien supplémentaires aux évaluateurs
Modifier les méthodes d'évaluation
Ajuster les critères d'évaluation
Apportez des modifications aux ressources de formation
La manière dont vous mettrez en œuvre ces recommandations dépendra de leur nature et de leur impact. Par exemple, si la validation de votre évaluation montre que vos outils d'évaluation actuels ne correspondent pas aux exigences des modules de formation, vous devrez peut-être développer de nouveaux outils ou modifier les outils existants. Les améliorations apportées par l'IA peuvent compléter vos efforts à cet égard. Un bon exemple provient de Boîte de cours, une plateforme de formation alimentée par l'IA dotée de fonctionnalités d'évaluation intégrées. Son évaluateur IA fournit des commentaires aux apprenants en fonction des critères de notation que vous avez sélectionnés.
De plus, le générateur de quiz IA crée des évaluations à l'aide de la même banque de questions organisée, préservant ainsi la cohérence et évitant aux formateurs d'avoir à effectuer des tests manuellement. Vous pouvez également ajouter du contenu interactif à vos cours, comme des onglets, des accordéons, des cartes mémoire, des vidéos, des discussions sociales, etc.
Dans l'ensemble, Coursebox améliore l'efficacité de votre processus de formation et vous aide à réaliser des évaluations plus efficaces. Il peut donc s'agir simplement de l'amélioration nécessaire pour répondre aux commentaires que vous avez reçus des évaluateurs et des apprenants.
De même, si les résultats de validation montrent la nécessité d'améliorer les critères d'évaluation, vous pouvez modifier vos grilles de notation ou ajuster vos méthodes d'évaluation pour les aligner étroitement sur les résultats d'apprentissage.
Conclusion
Sur la base des directives établies par l'ASQA, il est clair que la validation des évaluations est indispensable pour les RTO en Australie. La procédure par étapes dont nous avons parlé ci-dessus peut vous aider à maîtriser votre fréquence de validation. Selon les normes pour les RTO 2015, un RTO doit valider ses produits tous les cinq ans. Cependant, il s'agit des exigences minimales que vous devez remplir. Vous pouvez toujours valider vos produits plus souvent, en particulier si vous évoluez dans un secteur dynamique où de nouvelles informations et pratiques apparaissent régulièrement.