평가 검증이란 무엇이며 왜 필요한가요?

호주 직업 교육 및 훈련 (VET) 부문에 종사하는 경우 학생들의 역량을 평가할 때 일정한 기준을 유지해야 합니다.이는 단지 평판을 유지하기 위한 것일 뿐만 아니라 호주 기술 품질 기관 (ASQA) 에서 정한 요구 사항이기도 합니다.

평가 검증은 이 표준의 필수 부분입니다.이 표준에는 다음과 같이 준수해야 하는 특정 지침이 포함되어 있습니다. 등록된 교육 기관 (RTO) 또는 VET 비즈니스.이 가이드에서는 평가 검증에 대해 알아야 할 모든 것을 설명합니다.

평가 검증이란 무엇입니까?

평가 검증은 평가 도구, 방법 및 프로세스의 품질과 일관성을 확인하는 프로세스입니다. RTO를 위한 표준ASQA에서 정한 바에 따르면 모든 RTO는 평가 검증 원칙을 준수해야 합니다.이렇게 하면 평가가 유효하고, 신뢰할 수 있고, 공정하고, 유연하다는 것을 보장받을 수 있습니다.

제1.8a의 조항 RTO를 위한 표준 RTO의 평가 시스템이 관련 VET 인증 과정 또는 교육 패키지의 요구 사항을 준수해야 한다고 명시하고 있습니다.

한편, 1.8b항은 RTO가 이러한 규칙을 준수하도록 요구합니다.

출처: VET 자문 그룹

증거의 규칙

증거 규칙은 후보자가 특정 기술 또는 지식 영역에서 유능한지 여부를 판단하는 데 사용되는 벤치마크입니다.각 교육 패키지별로 요약되어 있으며 평가 도구 및 프로세스를 개발할 때는 RTO를 준수해야 합니다.이러한 규칙에는 다음이 포함됩니다.

• 효력: 평가 도구는 측정하려는 대상을 측정해야 합니다.
• 충분함: 수집된 증거는 후보자의 역량을 입증하기에 충분해야 합니다.
• 정품성: 증거는 후보자 자신의 작품이어야 합니다.
• 화폐: 증거는 업계 표준에 부합하는 최신 지식과 기술을 입증해야 합니다.
• 신뢰도: 평가 도구는 여러 후보자에 대해 일관된 결과를 산출해야 합니다.

평가의 원칙

더 평가의 원칙 VET에서 평가를 설계하고 구현할 때 따라야 하는 주요 원칙을 설명합니다.여기에는 공정성, 유연성, 타당성 및 신뢰성도 포함됩니다. 또한 이러한 원칙에는 평가가 단순히 최종 평가가 아니라 학습 과정의 일부가 되어야 합니다.또한 학생들은 자신의 성과에 대한 명확하고 시기적절한 피드백을 받아 자신의 성과를 향상시켜야 합니다. 학습 경험.

평가 검증에는 무엇이 포함됩니까?

RTO 2015 표준에 따르면 평가 검증에는 다음이 포함됩니다.

• 범위에 대한 각 자격 또는 교육 제품에 대해 평가자가 내린 평가 판단의 샘플 (통계적으로 유효) 검토
• 평가 도구의 향후 개선 사항 권장
• 권장 사항에 따라 행동하기
• 평가 프로세스 개선

평가 검증을 위한 후보를 선택할 때는 계층화된 무작위 표본 추출 방식을 사용하는 것이 좋습니다.이 방법에는 학생들을 교내 학습자, 직장 내 학습자, 사전 학습 인정 (RPL) 을 받는 학생 등 서로 다른 그룹으로 분류한 다음 심층 검토를 위해 각 범주에서 대표 표본을 무작위로 선택하는 과정이 포함됩니다. 시간이 지남에 따라 모든 평가자는 평가 도구, 포괄적인 검증을 위해 샘플에 방법을 통합해야 합니다.평가 검증을 위한 표본을 선택할 때 다음 요소를 고려할 수 있습니다.

• 다양한 교육 프로그램 전반의 학생 등록 수치
• 조직 내 교육 제공 범위
• 학생, 트레이너, 고객 등 주요 이해관계자의 피드백
• 공식 및 비공식 불만 사항 기록
• 과정 수료율
• 특정 교육 제품과 관련된 위험 평가
• 평가 제공 모드 (예: 시뮬레이션된 환경, 작업장 기반 평가 또는 RPL)
• 새로운 평가 도구 또는 활동 구현
• 새로운 교육 프로그램 소개
• 신규 평가자 참여

하지만 이러한 요소만 고려해야 하는 것은 아닙니다.조직 또는 교육 프로그램에 특정한 다른 기준을 통합할 수도 있습니다.

평가 검증이 중요한 이유

평가 검증은 전체 평가 프로세스의 품질 검사로 생각할 수 있습니다.이를 통해 평가 대상이 공정하고 일관성이 있는지 확인하고 실제 목표를 측정할 수 있습니다.

검증이 없으면 평가가 너무 쉽거나 너무 어렵거나 업계의 기대치에 부합하지 않을 수 있는 실질적인 위험이 있습니다. 학생, 고용주 또는 교육 기관에 적합한 것은 없습니다. VET의 목표는 학생들이 취업을 준비할 수 있도록 하는 것이므로 평가 검증을 통해 실제 기술을 점검할 수 있습니다.이를 통해 학습자가 각자의 직업에서 직면하게 될 실제 과제를 평가에 반영할 수 있습니다.가장 중요한 점은 RTO의 경우 평가 검증은 RTO 표준 준수와 관련하여 타협할 수 없는 부분이라는 점입니다. 검증은 평가 도구 또는 프로세스의 약점이 더 큰 문제로 확대되기 전에 이를 찾아내는 데도 도움이 됩니다.정기적인 검증을 실시하지 않으면 너무 늦고 학생들은 이미 심각한 결과에 직면하기 전까지는 평가가 효과적인지 알 수 없습니다.

누가 평가 검증을 수행합니까?

평가 검증은 효과적이고 의미 있는 검증을 수행할 수 있는 적절한 지식과 경험을 갖춘 사람이 수행해야 합니다.이러한 개인에는 다음이 포함될 수 있습니다.

• 원래 평가 프로세스에 참여하지 않은 직원
• 관련 업계 경험을 갖춘 자격을 갖춘 평가자
• 외부 주제 전문가 또는 심사원
• 업계 담당자

검증을 수행하는 사람은 평가 요구 사항을 철저히 이해해야 합니다.또한 업계 관행과 표준을 잘 알고 있어야 합니다.업계에 대한 특정 규제 요구 사항이 있는 경우 검증 프로세스 중에 이러한 요구 사항도 고려해야 합니다.

효과적인 평가 검증을 수행하는 방법은 무엇입니까?

다음은 RTO로서 효과적인 평가 검증을 수행하는 방법에 대한 단계별 가이드입니다.

1단계: 검증 일정 생성

먼저 검증을 수행할 시기와 빈도를 설명하는 검증 일정을 개발해야 합니다.이는 조직의 교육 및 평가 일정을 기반으로 할 수 있습니다.규제 요구 사항이 있는 경우 해당 요구 사항도 염두에 두십시오. 일정에는 각 세션에서 검증될 특정 평가 또는 교육 프로그램도 포함되어야 합니다.ASQA는 몇 가지 사실을 인정했습니다. 체계적 위험 건설, 유아 교육, 노인 및 지역 사회 복지 등 특정 분야에서 VET를 운영하고 있습니다.만나기 위해 조항 1.10, 이러한 영역에서 검증을 더 자주 수행해야 합니다.

2단계: 검증 계획 생성

이 계획에는 다음을 포함해야 합니다.

• 검증 범위: 기간 및 규제 요구 사항과 함께 검증될 특정 평가 또는 교육 프로그램을 포함시키십시오.
• 관련 팀원: 검증 프로세스에 참여할 팀 구성원과 각자의 역할을 언급하세요.
• 검증 방법: 관찰, 인터뷰, 평가 문서 검토 등 검증에 사용할 방법을 설명합니다.
• 데이터 수집 및 분석: 검증 중에 데이터를 수집하는 방법을 지정합니다.

3단계: 샘플 선택

위에서 설명했듯이 표본은 통계적으로 유효해야 합니다.코호트 내의 다양성을 반영하고 교육 패키지 내의 모든 역량 단위를 포괄해야 합니다.

4단계: 평가 검증 증거 기록

관찰 양식, 인터뷰 노트, 평가 문서, 평가자와 학습자의 서면 피드백 등 검증 과정에서 수집된 증거를 추적하세요.증거가 증거 규칙 및 평가 원칙과 일치하는지 확인하세요.

5단계: 결과 분석

검증 증거를 수집하고 기록한 후 결과를 분석합니다.데이터에서 개선이 필요한 영역을 나타낼 수 있는 패턴이나 추세를 찾아보십시오.

평가자와 학습자의 피드백을 고려하여 평가 프로세스에 필요할 수 있는 잠재적 변경 사항을 식별하십시오.

6단계: 변경 사항 구현

그런 다음 권장 사항에 따라 개선하십시오.예를 들어 다음과 같은 작업을 수행할 수 있습니다.

• 평가 도구 또는 프로세스 업데이트
• 평가자를 위한 추가 교육 또는 지원 제공
• 평가 방법 수정
• 평가 기준 조정
• 교육 리소스 변경하기

이러한 권장 사항을 구현하는 방법은 해당 권장 사항의 특성과 영향에 따라 달라집니다.예를 들어 평가 검증을 통해 현재 평가 도구가 교육 패키지 요구 사항과 일치하지 않는 것으로 확인되면 새 도구를 개발하거나 기존 도구를 수정해야 할 수 있습니다. AI 기반 개선을 통해 이러한 노력을 더욱 보완할 수 있습니다.좋은 예가 바로 다음에서 찾아볼 수 있습니다. 코스박스AI 평가 기능이 내장된 AI 기반 교육 플랫폼입니다.AI 그레이더는 선택한 채점 기준에 따라 학습자에게 피드백을 제공합니다.

또한 AI 퀴즈 생성기는 동일한 큐레이션된 질문 은행을 사용하여 평가를 생성하므로 일관성을 유지하고 트레이너가 수동으로 테스트를 진행해야 하는 번거로움을 덜어줍니다.또한 탭, 아코디언, 플래시카드, 비디오, 소셜 토론 등과 같은 대화형 콘텐츠를 코스 내에 추가할 수 있습니다.

대체로 Coursebox는 교육 프로세스의 효율성을 개선하고 보다 효과적인 평가를 제공할 수 있도록 도와줍니다.따라서 평가자와 학습자로부터 받은 피드백을 해결하는 데 필요한 개선일 수 있습니다.

마찬가지로, 검증 결과 평가 기준의 개선이 필요한 경우 채점 루브릭을 수정하거나 평가 방법을 조정하여 학습 성과와 밀접하게 연계할 수 있습니다.

결론

ASQA에서 정한 가이드라인에 따르면 호주 RTO의 경우 평가 검증이 필수라는 것이 분명합니다.위에서 설명한 단계별 절차를 통해 검증 빈도를 파악할 수 있습니다. RTOS 2015 표준에 따르면 RTO는 5년마다 제품을 검증해야 합니다.하지만 이는 충족해야 하는 최소 요구 사항입니다.특히 새로운 정보와 관행이 정기적으로 등장하는 역동적인 산업에서 사업을 운영하는 경우 언제든지 제품을 더 자주 검증할 수 있습니다.