TSA 사고력 평가 채점 방법

NDO - 하노이 과학기술대학교 TSA 사고력 평가 채점 방법에서 주목할 만한 점은 전통적인 채점 방법을 사용하지 않고 질문 응답 이론을 적용하여 응시자의 점수를 계산하여 응시자의 능력을 정확하고 신뢰할 수 있게 추정할 수 있다는 점입니다.

하노이 과학기술대학교의 사고력 평가(TSA) 시험은 수학적 사고, 독해 능력, 과학적 사고/문제 해결 능력 등 학생의 세 가지 기본적인 사고 능력을 평가하는 것을 목표로 합니다. 이러한 능력은 학생들이 대학 교육 환경에서 가장 잘 공부할 수 있도록 돕는 중요한 요소입니다.

따라서 시험은 수학적 사고(60분), 독해(30분), 과학적 사고/문제 해결(60분)의 세 부분으로 구성됩니다. 이 세 부분은 각각 독립적인 부분으로, 시험 문제는 특정 과목에 대한 지식을 직접적으로 평가하는 것이 아니라 각 부분에서 응시자의 사고 능력을 평가하는 데 중점을 둡니다.

TSA 시험은 세 개의 독립적인 섹션(수학적 사고, 독해, 과학적 사고/문제 해결)으로 구성되어 있으며, 특정 과목에 대한 지식을 직접 테스트하는 것이 아니라 응시자의 능력을 평가하는 데 중점을 둡니다.

TSA 적성 시험의 채점 방법에는 몇 가지 주목할 만한 점이 있습니다.

하노이 과학기술대학교 입학진로지도부는 전통적인 채점 방식은 원점수를 최종 시험 평가 결과로 사용하는 것이라고 밝혔습니다. 고전적인 객관식 이론에 따르면, 시험의 원점수는 해당 시험 문항의 점수를 합산한 것입니다.

예를 들어, 100문항으로 구성된 시험에서 정답은 1점입니다. 응시자가 70문항을 맞히면 70점을 받게 됩니다. 이 점수를 원점수라고 하며, 결과를 평가하고 다른 응시자의 점수와 비교하는 데 사용됩니다.

원점수를 사용하는 것의 단점 중 하나는 같은 시험을 동시에 치를 때 같은 원점수를 가진 응시자들을 구분하기 어렵다는 것입니다. 또한, 원점수를 사용하여 능력 점수를 계산할 경우, 난이도가 다른 두 시험을 동시에 치르면 응시자들의 능력이 달라집니다. 예를 들어, 한 시험에서 무작위로 70개의 문제를 맞힌 응시자들은 모두 70점의 원점수를 받게 됩니다.

실제로 이러한 지원자들은 서로 다른 문제 세트에 올바르게 답할 수 있으며, 시험에서 이러한 문제의 난이도도 다르므로 70점이라는 점수는 이러한 지원자들의 능력을 정확하게 반영하지 못합니다.

이 문제를 해결하기 위해 전 세계 주요 시험에서는 현대 교육 측정 이론을 활용하여 응시자의 능력을 더욱 정확하고 신뢰성 있게 추정해 왔습니다. 그중 하나가 질문-응답 이론을 적용하는 것입니다. 이 이론은 각 응시자가 특정 수준의 능력을 가지고 시험 문제에 답하며, 높은 능력을 가진 응시자는 낮은 능력을 가진 응시자보다 모든 문제에 정답을 맞힐 확률이 더 높다는 가설을 세웁니다. 이 이론을 바탕으로 문제의 난이도와 변별력, 그리고 응시자의 능력과 같은 매개변수를 정량화할 수 있으며, 이러한 요소들은 서로 독립적입니다.

즉, 매개변수는 해당 질문에 응답하는 응시자 표본과는 무관하게 해당 질문에만 국한되며, 반대로 응시자의 능력은 응답하는 모든 질문에서 일정하게 유지됩니다. 따라서 응시자 능력 추정치는 원점수 방식보다 더 신뢰할 수 있습니다.

채점 알고리즘은 응시자의 시험 결과를 바탕으로 정답률에 따라 각 문제의 사고 수준을 결정합니다. 정답이 적은 문제는 사고 수준이 높은 문제이고, 정답이 많은 문제는 사고 수준이 낮은 문제입니다.

하노이 과학기술대학교 TSA 사고력 평가 시험은 학생들의 TSA 점수를 계산할 때 문항 응답 이론을 사용합니다. 이 계산 방식을 사용하면 응시자의 원점수는 동일하지만, 각 응시자가 답할 수 있는 문제의 난이도를 기준으로 해당 능력 수준을 추정하여 100점 만점으로 환산합니다.

채점 기준은 각 라운드의 시험 후 응시자의 시험 결과를 바탕으로 구성됩니다. 응시자의 시험 결과를 기반으로 채점 알고리즘은 정답을 맞힌 응시자의 비율에 따라 각 문제의 사고 수준을 결정합니다. 정답을 맞힌 응시자가 적은 문제는 사고 수준이 높은 문제이고, 정답을 맞힌 응시자가 많은 문제는 사고 수준이 낮은 문제라는 원칙에 따라 결정됩니다. 채점 기준은 정답을 맞힌 응시자의 비율에 따라 사고 수준이 높은 문제가 높은 점수를 받고, 정답을 맞힌 응시자의 비율에 따라 사고 수준이 낮은 문제가 낮은 점수를 받는다는 원칙에 따라 구성됩니다.

또한, 하노이 과학기술대학교 TSA 시험은 시험 세션 간 공정성을 보장하기 위해 시험지 간에 일련의 표준 "브리지" 문제(브리지 문제, 공통 문제가라고도 함)를 적용하여 시험 평가 지표를 동일한 척도로 조정합니다. 이 기술을 통해 각 시험 세션의 응시자들이 동일한 공통 척도로 평가받도록 하여 시험 세션 간 결과의 공정성을 보장합니다.

2024년 대학 입학 시즌 동안 하노이 과학기술대학교의 TSA 사고력 평가 시험에 약 5만 회, 총 2만 1천 명의 지원자가 응시했습니다. 이 시험 결과는 50개 이상의 대학에서 정규 대학 입학 사정에 활용되었습니다. 2025년에는 사고력 평가 시험이 1월부터 4월까지 실시될 예정입니다.

출처: https://nhandan.vn/phuong-phap-cham-diem-cua-bai-thi-danh-gia-nang-luc-tsa-post845455.html