평가의 타당성이란 무엇인가

평가 유형에 관계없이 결과에 의미 있는 정보를 제공하려면 충족해야 하는 요건이 있습니다.이것이 바로 평가의 타당도입니다.타당성을 제대로 파악하면 점수를 생성하는 것 이상의 효과를 얻을 수 있습니다.우리는 학습, 개발, 기회를 위한 의미 있는 경로를 만듭니다.

그러나 평가의 타당성은 정확히 무엇입니까?간단히 말해서 평가가 측정하고자 하는 대상을 측정하는 정도입니다.평가는 많은 학습자의 삶을 좌우합니다.이는 학생들이 자신을 보는 방식과 교사가 가르치는 방식에 영향을 미칩니다.

따라서 제한보다는 권한을 부여하는 평가를 원한다면 유효성에 대한 미묘한 이해가 필요합니다.이 가이드에서는 유효성의 중요성과 이를 유효성에 통합할 수 있는 방법을 설명합니다. 온라인 과정.

e러닝 평가의 유효성이란 무엇입니까?

평가의 타당성은 우리가 측정하는 내용이 실제로 중요한 것을 반영한다는 확신입니다.개인화와 혁신이 표준인 e러닝에서는 유효성을 보장하는 것이 더 복잡하면서도 필수적입니다.

기본적으로 유효성은 우리가 측정하고자 하는 것을 측정하고 있는지 여부에 대한 질문을 제기합니다.간단하게 들릴지 모르지만 평가가 객관식 질문을 넘어 시뮬레이션, 동료 평가 또는 대화형 과제로 이어지는 디지털 학습 환경에서는 답을 신중하게 설계하고 반영해야 합니다.

평가에는 몇 가지 유형의 유효성이 있습니다.

• 콘텐츠 유효성: 평가가 모든 관련 자료를 다루고 있습니까?문제나 과제가 학습한 내용의 전체 범위를 반영하는지 확인합니다.
• 구성 유효성: 평가가 기본 기술 또는 개념을 측정하고 있습니까?유형은 과제가 비판적 사고나 창의성과 같은 추상적 특성을 얼마나 잘 포착하는지에 초점을 맞춥니다.
• 기준 유효성: 평가 결과가 실제 결과 또는 외부 벤치마크와 얼마나 잘 일치합니까?이는 평가를 신뢰할 수 있는 다른 측정값과 비교하여 검증하는 것입니다.
• 얼굴 유효성: 평가가 주장하는 내용을 측정하는 것처럼 보입니까?얼굴의 유효성은 통계적 증거라기보다는 인식에 더 중요하지만 학습자의 신뢰와 참여도에 영향을 미칩니다.

평가에서의 타당성의 예

유효성이란 평가에서 측정하려는 대상을 정확하게 측정할 수 있는 능력을 의미한다고 말씀드렸습니다.하지만 실제 상황에 실제로 어떻게 적용될까요?

프로젝트 관리에 관한 온라인 강좌가 있다고 가정해 보겠습니다.최종 평가는 용어에 초점을 맞춘 시간제 객관식 시험입니다.질문은 다음과 같습니다. 이 테스트가 실제 프로젝트를 관리하는 사람의 능력을 실제로 측정합니까?

아마 아닐 겁니다.암기는 기록할 수 있지만 역할에 필수적인 의사 결정, 팀워크, 갈등 해결 또는 시간 관리는 포함하지 않을 수 있습니다.

이제 동일한 과정에 대한 다른 평가를 상상해 보십시오.학습자는 프로젝트 계획을 세우고 공유 작업 공간에서 동료들과 협업해야 합니다.또한 학생들은 예상치 못한 범위 변경에 따라 다음을 통해 대응해야 합니다. 브랜칭 시뮬레이션.

설정이 더 복잡하지만 실제 설정과 더 밀접하게 일치합니다. 역량 가르침을 받고 있습니다.따라서 후자의 경우 유효성이 더 강해집니다.

평가의 유효성이 중요한 이유는 무엇입니까?

모든 평가에서 유효성은 규제 기관이나 기관에서 요구할 수 있기 때문에 중요할 뿐만 아니라그보다는 평가가 유효해야 하는 몇 가지 다른 이유가 있습니다.

신뢰도를 길러줍니다

유효성이 없으면 아무리 정교한 도구라도 소음이 발생할 위험이 있습니다.공식적으로 보이지만 학습자가 실제로 알고 있거나 할 수 있는 것에 대해 거의 알려주지 않는 결과를 생성합니다.

반대로 평가가 유효하면 강력한 렌즈가 됩니다.기술, 격차, 성장, 잠재력을 명확하게 보여줍니다.

현실에서 일어나는 영향

유효성은 실제로 코스의 실제 결과에 크게 기여합니다.기업의 e러닝 프로그램이 직원들의 데이터 분석 기술을 향상시키도록 설계되었다고 가정해 보겠습니다.

그러나 최종 테스트에서는 실제 적용보다는 이론적 정의만 측정합니다.이제는 회사에서 누군가를 “자격”이 있는 사람으로 인증할 수도 있지만, 실제로는 그러한 기술을 실제 환경에 적용하는 데 어려움을 겪을 수도 있습니다.그 결과 직원은 성과가 저조하고 기회를 놓치게 됩니다.

교육 환경에서는 위험이 훨씬 더 높습니다.온라인 과학 강좌를 수강하는 학생을 상상해 보십시오.평가 결과가 공식을 실제 문제에 적용하지 않고 암기하는 것에 그친다면, 그 학생은 자료를 제대로 이해하지 못한 채 높은 점수를 받을 수도 있습니다.나중에 고급 과정이나 직장에서 격차가 나타나기 시작합니다.

더 넓은 범위에서 평가의 유효성은 자금 조달, 고용, 정책 및 승진에도 영향을 미칩니다.따라서 개인의 성과에만 국한된 문제가 아닙니다.그것은 우리가 배우고 일하는 시스템을 형성합니다.

혁신 지원

평가가 유효하면 혁신을 지원할 수도 있습니다. 유효한 평가 학생들의 창의성과 비판적 사고력을 고취시킵니다.

초점이 암기에서 적용 및 문제 해결로 옮겨가면 학생들은 고정관념에서 벗어나 독특한 해결책을 찾도록 장려됩니다.이러한 접근 방식은 교실 내 혁신을 지원하는 것 외에도 학생들이 창의적인 문제 해결과 적응력을 높이 평가하는 직장에서 미래에 성공할 수 있도록 준비시켜 줍니다.

평가의 네 가지 기둥과 유효성이 적합한 경우

유효성은 평가의 네 가지 기둥 중 하나입니다.나머지 세 가지와 유효성과의 관계에 대해 알아보겠습니다.

목적

모든 평가의 첫 번째 기둥은 목적입니다.무언가를 평가하는 이유는 무엇인가요?학습자의 기본 이해도를 확인하거나 향후 학습을 안내하기 위해 할 수 있습니다.

디지털 마케팅 과정을 만든다고 가정해 봅시다.이 과정의 평가 목적은 학습자가 실제 캠페인을 실행할 수 있도록 준비시키는 것입니다.이를 위해서는 평가가 이론을 넘어 실무 능력을 테스트해야 합니다.

효력

두 번째 원칙은 유효성이며, 위에서 이미 자세히 설명했습니다.여기서 스스로에게 물으실 수 있습니다. 우리가 말하는 것을 실제로 측정하고 있는 걸까요?

예를 들어, 코스의 목표가 전략을 가르치는 것이고 최종 시험에서 마케팅 용어의 정의에 대해서만 질문하는 경우 평가는 유효성 테스트에서 실패합니다.보다 효과적인 접근 방식은 캠페인을 분석하고 지표를 해석하는 것입니다.이러한 작업은 현실 세계에서 진정으로 중요한 기술을 반영합니다.

신뢰도

평가가 유효하다는 것을 알게 되면 다음 단계는 일관성입니다.신뢰성이란 결과가 안정적이고 반복 가능해야 한다는 의미입니다.비슷한 기술을 가진 두 명의 학습자가 비슷한 조건에서 같은 평가를 받는다면 결과가 일치할 것입니다.

예를 들어, 학습자에게 샘플 캠페인을 평가하도록 요청했지만 채점이 전적으로 한 명의 강사의 주관적인 의견에 따라 달라지면 결과가 크게 달라질 수 있습니다.대신, 다음을 추가하면 세부 표제 또는 평가 검사를 위해 여러 명의 검토자를 배치하면 결과가 더 일관됩니다.

디지털 플랫폼에서 자동 채점은 신뢰성도 지원할 수 있습니다.예를 들어, 코스박스AI 기반 코스 빌더에는 AI 그레이더.이 도구를 사용하여 AI로 생성된 평가를 생성한 다음, AI 채점자가 제공한 루브릭을 기반으로 평가에 점수를 매기도록 할 수 있습니다.

채점은 자동화되고 루브릭을 기반으로 하기 때문에 대상이 될 위험이 없습니다.따라서 결과는 일관되고 신뢰할 수 있습니다.

가치

최고의 평가는 시험뿐만 아니라 가르치기도 합니다.학습자는 사용할 수 있고 교육자는 이에 따라 행동할 수 있는 통찰력을 제공해야 합니다.

위의 디지털 마케팅 과정 예시에서는 학습자의 전략에 대한 자세한 피드백으로 평가가 끝날 수 있습니다.학습자가 어떻게 개선할 수 있는지 확인하고 강사가 학습자를 어디에 지원해야 하는지 명확하게 파악할 수 있을 때, 평가는 실질적인 가치를 제공합니다.

온라인 과정 평가를 유효하게 만드는 방법은 무엇입니까?

온라인 코스에 대한 평가를 생성할 때 다음 팁을 사용하여 유효성 요구 사항을 충족하십시오.

목표를 염두에 두고 시작하세요

모든 유효한 평가는 명확성을 바탕으로 시작됩니다.강좌가 끝날 때까지 학습자는 무엇을 할 수 있어야 할까요?강좌에서 창의적인 글쓰기를 가르치는 경우 문법 훈련을 중심으로 평가를 진행해서는 안 됩니다.학습자에게 실제 글쓰기를 만들고 숙고해 보라고 요청해야 합니다.

이상적으로는 평가가 학습 목표와 직접 연계되어야 합니다.예를 들어, 창의적 글쓰기 과정에서 학습자가 강좌가 끝날 때까지 500단어짜리 단편 소설을 쓸 수 있게 된다고 한다면, 평가에서는 학습자가 정확히 그렇게 하도록 요구해야 합니다.

평가 형식을 기술에 맞게 조정하십시오.

강좌에 대해 선택하는 평가 유형은 가르치는 기술에 따라 달라집니다.예를 들어, 창의적 글쓰기 과정에서는 단편 소설을 써서 학습자가 학습한 개념과 기법을 적용할 수 있는지 평가하는 가장 좋은 방법일 수 있습니다.

그러나 데이터 분석 과정에서는 학습자에게 실제 데이터 세트를 해석한 다음 패턴을 기반으로 결정을 내리도록 평가해야 합니다.한편, 객관식 문제는 역사나 생물학과 같은 과정의 특정 사실이나 개념에 대한 학생들의 지식을 테스트하는 데 적합할 수 있습니다.

실제 상황 통합

평가가 기술을 사용할 환경을 더 많이 반영할수록 해당 기술은 더 유효해집니다.예를 들어, 기업가 정신 과정에서는 학습자에게 비즈니스 아이디어의 프레젠테이션 자료 초안을 작성하도록 요청하는 것이 비즈니스 라이프사이클의 단계를 나열하도록 요청하는 것보다 훨씬 더 효과적입니다.

아이디어는 가능한 한 현실적이고 실제 시나리오와 관련이 있는 평가를 만드는 것입니다.이를 통해 학습자는 학습한 내용이 실제 적용되는지 이해할 수 있습니다.

학습 목표를 강화하는 피드백 제공

위에서 설명했듯이 학습자는 평가에 대해 사려 깊고 표적화된 피드백을 받아야 합니다.학습자가 무엇을 옳았는지 (또는 틀렸는지) 알려주는 것뿐만 아니라 그것이 왜 중요한지도 알려주는 것이 중요합니다.그러면 평가와 실제 역량을 서로 연결시킬 수 있습니다.

Coursebox를 사용하는 경우 각 학습자에게 개별 피드백을 제공할 수 있습니다.또는 AI 채점자가 평가에 점수를 매기고 학습자가 루브릭과 함께 결과를 집계하여 어느 부분에서 부족했는지 파악할 수 있습니다.

결론

교육 설계자는 종종 평가의 중요성을 간과하고 코스 내용에 모든 에너지를 집중합니다.그러나 평가가 유효하지 않으면 학습자의 이해도를 정확하게 측정할 수 없습니다.

유효성은 평가의 다른 두 기둥 (신뢰성과 가치) 의 선구자이기도 합니다.따라서 잘못하면 전체 평가 프로세스가 무너질 수 있습니다.이 안내서의 팁은 다음과 같이 구성되어 있습니다. 자동 평가 도구 Coursebox와 마찬가지로 일반적인 유효성 문제를 방지하는 데 도움이 될 수 있습니다.