Erfahren Sie mehr über das Konzept der Bewertungsvalidierung und verstehen Sie, wie wichtig es für die Verbesserung der Bewertungsgenauigkeit ist. Finden Sie heraus, warum es ein Muss für Ihr RTO ist.
Wenn Sie im australischen Berufsbildungssektor (VET) tätig sind, müssen Sie bei der Bewertung der Kompetenzen Ihrer Schüler einen bestimmten Standard einhalten. Das ist nicht nur etwas, was Sie tun, um Ihren Ruf zu wahren, sondern es ist auch eine Anforderung, die von der Australian Skills Quality Authority (ASQA) festgelegt wird.
Die Validierung von Bewertungen ist ein unverzichtbarer Bestandteil dieser Norm. Es enthält bestimmte Richtlinien, die Sie als registrierte Ausbildungsorganisation (RTO) oder Berufsbildungsgeschäft. In diesem Leitfaden besprechen wir alles, was Sie über die Validierung von Prüfungen wissen müssen.
Die Bewertungsvalidierung ist ein Prozess, bei dem Sie die Qualität und Konsistenz Ihrer Bewertungsinstrumente, -methoden und -prozesse bestätigen. Das Standards für RTOs, die von ASQA festgelegt wurden, verlangen, dass alle RTOs den Grundsätzen der Bewertungsvalidierung entsprechen. Dadurch wird sichergestellt, dass Ihre Bewertungen gültig, zuverlässig, fair und flexibel sind.
Klausel 1.8a der Standards für RTOs erklärt, dass die Bewertungssysteme der RTO den Anforderungen der entsprechenden, von der Berufsbildung anerkannten Kurse oder Ausbildungspakete entsprechen sollten.
In der Zwischenzeit verlangt Klausel 1.8b, dass die RTOs diese Regeln einhalten.
Quelle: Berufsbildungsberatungsgruppe
Die Beweisregeln sind die Maßstäbe, anhand derer beurteilt wird, ob ein Kandidat in einem bestimmten Fähigkeiten- oder Wissensbereich kompetent ist. Sie sind in jedem Schulungspaket enthalten und müssen vom RTO bei der Entwicklung von Bewertungsinstrumenten und -prozessen befolgt werden. Diese Regeln beinhalten:
Das Grundsätze der Bewertung skizzieren Sie die wichtigsten Prinzipien, die bei der Konzipierung und Durchführung von Bewertungen in der Berufsbildung beachtet werden sollten. Dazu gehören auch Fairness, Flexibilität, Validität und Zuverlässigkeit. Diese Prinzipien erfordern auch, dass die Bewertung Teil des Lernprozesses ist und nicht nur eine abschließende Bewertung. Die Schüler sollten außerdem klare und zeitnahe Rückmeldungen zu ihren Leistungen erhalten, um ihre Leistung zu verbessern Lernerfahrung.
Gemäß den Standards für RTOs 2015 umfasst die Bewertungsvalidierung Folgendes:
Es wird empfohlen, bei der Auswahl der Kandidaten für die Bewertungsvalidierung einen stratifizierten Zufallsstichprobenansatz zu verwenden. Bei dieser Methode werden die Studierenden in verschiedene Gruppen eingeteilt — etwa Lernende auf dem Campus, Auszubildende am Arbeitsplatz und Personen, die sich einer Anerkennung früherer Kenntnisse (RPL) unterziehen — und dann nach dem Zufallsprinzip eine repräsentative Stichprobe aus jeder Kategorie für eine eingehende Überprüfung ausgewählt. Im Laufe der Zeit werden alle Prüfer Bewertungsinstrumente, und Methoden sollten für eine umfassende Validierung in die Stichprobe aufgenommen werden. Bei der Auswahl einer Stichprobe für die Validierung der Bewertung können Sie die folgenden Faktoren berücksichtigen:
Dies sind jedoch nicht die einzigen zu berücksichtigenden Faktoren. Sie können auch andere Kriterien berücksichtigen, die für Ihr Unternehmen oder Ihre Schulungsprogramme spezifisch sind.
Sie können sich die Bewertungsvalidierung als Qualitätsprüfung für den gesamten Bewertungsprozess vorstellen. Es hilft sicherzustellen, dass das, was bewertet wird, fair und konsistent ist und tatsächlich misst, was es soll.
Ohne Validierung besteht das reale Risiko, dass Bewertungen zu einfach, zu schwierig oder einfach nicht den Erwartungen der Branche entsprechen, von denen keine ideal für Studierende, Arbeitgeber oder Ausbildungseinrichtungen ist. Da das Ziel der Berufsbildung darin besteht, die Schüler auf das Berufsleben vorzubereiten, hält die Validierung von Bewertungen ihre realen Fähigkeiten in Schach. Dadurch wird sichergestellt, dass die Bewertungen die tatsächlichen Aufgaben widerspiegeln, mit denen die Lernenden in ihrer jeweiligen Tätigkeit konfrontiert werden. Am wichtigsten ist, dass für RTOs die Bewertung ein nicht verhandelbarer Bestandteil der Einhaltung der Standards für RTOs ist. Die Validierung hilft auch dabei, Schwächen in den Bewertungsinstrumenten oder -prozessen zu erkennen, bevor sie zu größeren Problemen werden. Wenn Sie keine regelmäßigen Validierungen durchführen, wissen Sie erst, ob Ihre Prüfungen wirksam sind, wenn es zu spät ist und die Studierenden bereits mit schwerwiegenden Konsequenzen zu kämpfen haben.
Die Validierung der Bewertung muss von Personen durchgeführt werden, die über die entsprechenden Kenntnisse und Erfahrungen verfügen, um effektive und aussagekräftige Validierungen durchzuführen. Zu diesen Personen können gehören:
Wer die Validierung durchführt, sollte die Anforderungen für die Bewertung gründlich verstehen. Sie sollten auch mit den Praktiken und Standards der Branche vertraut sein. Wenn es spezifische regulatorische Anforderungen für die Branche gibt, müssen diese ebenfalls während des Validierungsprozesses berücksichtigt werden.
Als RTO finden Sie hier eine schrittweise Anleitung zur Durchführung einer effektiven Bewertungsvalidierung.
Zunächst sollten Sie einen Validierungsplan entwickeln, der festlegt, wann und wie oft Validierungen durchgeführt werden. Sie können sich dabei auf den Schulungs- und Bewertungskalender Ihrer Organisation stützen. Wenn gesetzliche Anforderungen bestehen, sollten Sie diese ebenfalls berücksichtigen. Der Zeitplan sollte auch die spezifischen Prüfungen oder Schulungsprogramme enthalten, die bei jeder Sitzung überprüft werden. ASQA hat einige erkannt systemische Risiken mit Berufsbildung in bestimmten Bereichen, darunter Bauwesen, frühkindliche Bildung, Alters- und Sozialpflege und mehr. Um uns zu treffen Klausel 1.10, müssen Sie in diesen Bereichen häufiger Validierungen durchführen.
In diesem Plan müssen Sie Folgendes einbeziehen:
Wie wir oben erklärt haben, sollte die Stichprobe statistisch gültig sein. Sie sollte die Vielfalt innerhalb der Kohorte widerspiegeln und alle Kompetenzeinheiten innerhalb des Schulungspakets abdecken.
Behalten Sie den Überblick über die während des Validierungsprozesses gesammelten Beweise wie Beobachtungsformulare, Gesprächsnotizen, Bewertungsdokumente und schriftliches Feedback von Prüfern und Lernenden. Vergewissern Sie sich, dass die Nachweise den Beweisregeln und den Bewertungsgrundsätzen entsprechen.
Analysieren Sie die Ergebnisse, nachdem Sie die Validierungsnachweise gesammelt und aufgezeichnet haben. Halten Sie Ausschau nach Mustern oder Trends in den Daten, die auf Verbesserungspotenziale hinweisen könnten.
Berücksichtigen Sie das Feedback von Prüfern und Lernenden, um mögliche Änderungen zu identifizieren, die im Bewertungsprozess erforderlich sein könnten.
Folgen Sie als Nächstes den Empfehlungen, um Verbesserungen vorzunehmen. Sie können zum Beispiel:
Die Art und Weise, wie Sie diese Empfehlungen umsetzen, hängt von ihrer Art und Wirkung ab. Wenn Ihre Bewertungsvalidierung beispielsweise zeigt, dass Ihre aktuellen Bewertungstools nicht den Anforderungen des Schulungspakets entsprechen, müssen Sie möglicherweise neue Tools entwickeln oder bestehende modifizieren. KI-gestützte Verbesserungen können Ihre diesbezüglichen Bemühungen weiter unterstützen. Ein gutes Beispiel stammt von Kursbox, eine KI-gestützte Trainingsplattform mit integrierten KI-Bewertungsfunktionen. Der KI-Grader gibt den Lernenden Feedback auf der Grundlage der von Ihnen ausgewählten Bewertungskriterien.
Darüber hinaus erstellt der KI-Quizgenerator Tests mithilfe derselben kuratierten Fragendatenbank, wodurch die Konsistenz gewahrt bleibt und den Trainern die Mühe erspart, Tests manuell durchzuführen. Sie können Ihren Kursen auch interaktive Inhalte hinzufügen, z. B. Tabs, Akkordeons, Karteikarten, Videos, soziale Diskussionen und mehr.
Alles in allem verbessert Coursebox die Effizienz Ihres Trainingsprozesses und hilft Ihnen dabei, effektivere Assessments durchzuführen. Es kann also genau die Verbesserung sein, die erforderlich ist, um auf das Feedback einzugehen, das Sie von Prüfern und Lernenden erhalten haben.
Ebenso können Sie, wenn die Validierungsergebnisse zeigen, dass die Bewertungskriterien verbessert werden müssen, Ihre Bewertungsrubriken anpassen oder Ihre Bewertungsmethoden anpassen, um sie eng an den Lernergebnissen auszurichten.
Basierend auf den Richtlinien von ASQA ist klar, dass die Validierung von Bewertungen ein Muss für RTOs in Australien ist. Das oben erläuterte schrittweise Verfahren kann Ihnen dabei helfen, den Überblick über Ihre Validierungshäufigkeit zu behalten. Gemäß den Standards für RTOs 2015 sollte ein RTO seine Produkte alle fünf Jahre validieren. Dies sind jedoch die Mindestanforderungen, die Sie erfüllen müssen. Sie können Ihre Produkte jederzeit häufiger validieren, insbesondere wenn Sie in einer dynamischen Branche tätig sind, in der regelmäßig neue Informationen und Verfahren auftauchen.
