Metoda hodnocení v rámci TSA Thinking Assessment

NDO - Pozoruhodným bodem metody hodnocení TSA Thinking Assessment Hanojské univerzity vědy a technologie je, že nepoužívá tradiční metodu hodnocení, ale při výpočtu skóre kandidáta aplikuje teorii otázek a odpovědí, aby bylo možné přesně a spolehlivě odhadnout schopnosti kandidáta.

Test Thinking Skills Assessment (TSA) Hanojské univerzity vědy a technologie si klade za cíl posoudit tři základní myšlenkové schopnosti studentů, a to: matematické myšlení, porozumění čtenému textu a vědecké myšlení/řešení problémů – důležité faktory, které studentům pomáhají co nejlépe studovat v prostředí univerzitního vzdělávání .

Test se tedy skládá ze 3 částí: Matematické myšlení (60 minut), Čtení s porozuměním (30 minut) a Vědecké myšlení/řešení problémů (60 minut). Jedná se o 3 nezávislé části, testové otázky se zaměří na posouzení myšlenkových schopností kandidáta v každé části, nikoli na přímé ověřování znalostí z daného předmětu.

Zkouška TSA se skládá ze tří nezávislých částí (Matematické myšlení, Čtení s porozuměním, Vědecké myšlení/Řešení problémů), které se zaměřují na posouzení schopností kandidátů, aniž by přímo testovaly znalosti jakéhokoli předmětu.

Ohledně metody hodnocení v testu způsobilosti TSA je třeba zmínit několik bodů.

Oddělení přijímacího řízení a kariérního poradenství Hanojské univerzity vědy a techniky uvedlo, že tradiční metodou hodnocení je použití hrubého skóre k vyhodnocení závěrečné zkoušky. Podle klasické teorie výběru odpovědí je hrubé skóre zkoušky součtem skóre z otázek v dané zkoušce.

Například v testu se 100 otázkami získá kandidát za každou správnou odpověď 1 bod. Pokud kandidát správně odpoví na 70 otázek, získá 70 bodů. Toto skóre se nazývá hrubé skóre a používá se k hodnocení výsledků a také k porovnání se skóre ostatních kandidátů.

Jednou z nevýhod používání hrubých skóre je, že je obtížné rozlišit mezi kandidáty se stejným hrubým skóre, kteří absolvují stejný test ve stejnou dobu. Kromě toho se při výpočtu skóre schopností pomocí hrubých skóre schopnosti kandidátů změní, pokud absolvují dva testy různé obtížnosti ve stejnou dobu. Například v testovacím období budou mít kandidáti, kteří správně odpoví na 70 náhodných otázek, stejné hrubé skóre 70 bodů.

Ve skutečnosti mohou tito kandidáti správně odpovědět na různé sady otázek a obtížnost těchto otázek ve zkoušce je také odlišná, takže skóre 70 přesně neodráží schopnosti těchto kandidátů.

Aby se tento problém vyřešil, používají se u hlavních zkoušek po celém světě moderní teorie měření ve vzdělávání, které umožňují přesnější a spolehlivější odhad schopností kandidátů. Jednou z nich je aplikace teorie otázek a odpovědí. Tato teorie předpokládá, že každý kandidát odpoví na otázku v testu s určitou úrovní schopností a že kandidáti s vysokými schopnostmi budou mít vyšší pravděpodobnost, že na jakoukoli otázku odpoví správně, než kandidáti s nízkými schopnostmi. Na základě této teorie lze kvantifikovat parametry, jako je obtížnost a rozlišovací schopnost otázek, a také schopnosti kandidátů, a tyto faktory jsou na sobě nezávislé.

To znamená, že parametry jsou specifické pro danou otázku, nezávislé na vzorku kandidátů, kteří na ni odpovídají, a naopak, schopnosti kandidáta jsou napříč otázkami, na které odpovídají, konstantní. Odhad schopností kandidáta bude proto spolehlivější než metoda hrubého skóre.

Na základě výsledků testů kandidátů určí algoritmus hodnocení úroveň myšlení každé otázky podle procenta kandidátů, kteří otázku správně zodpověděli. Podle tohoto principu budou otázky s malým počtem správných odpovědí otázkami s vysokou úrovní myšlení, otázky s mnoha správnými odpověďmi budou otázkami s nízkou úrovní myšlení.

Test TSA Thinking Assessment na Hanojské univerzitě vědy a technologie využívá k výpočtu skóre studentů teorii otázek a odpovědí. Při tomto výpočtu, ačkoli mají kandidáti stejné hrubé skóre, se na základě úrovně obtížnosti otázek, na které je každý kandidát schopen odpovědět, odhadne odpovídající úroveň schopností a toto skóre se poté převede na 100bodovou stupnici.

Bodovací stupnice bude vytvořena na základě výsledků testů kandidátů po každém testu. Na základě výsledků testů kandidátů určí bodovací algoritmus úroveň myšlení každé otázky podle procenta kandidátů, kteří na danou otázku odpoví správně. Podle principu budou otázky s malým počtem správných odpovědí otázky s vysokou úrovní myšlení, otázky s mnoha správnými odpověďmi budou otázky s nízkou úrovní myšlení. Bodovací stupnice je vytvořena podle principu, že otázky s vysokou úrovní myšlení budou hodnoceny vysoko v poměru k procentu kandidátů, kteří odpoví správně, otázky s nízkou úrovní myšlení budou hodnoceny nízko v poměru k procentu kandidátů, kteří odpoví správně.

Kromě toho, aby byla zajištěna spravedlivost mezi jednotlivými zkušebními obdobími, zkouška TSA Hanojské univerzity vědy a technologie používá mezi zkušebními testy také sadu standardních „přemosťovacích“ otázek – známých také jako přemosťovací otázky nebo společné otázky – aby se ukazatele hodnocení zkoušky srovnaly. Tato technologie zajistí, že kandidáti v různých zkušebních obdobích budou hodnoceni na stejné společné stupnici, čímž se zajistí spravedlivost výsledků mezi jednotlivými zkušebními obdobími.

Během přijímacího řízení na univerzity v roce 2024 absolvovalo test TSA Thinking Assessment Hanojské univerzity vědy a technologie téměř 50 000 uchazečů s celkovým počtem přibližně 21 000 uchazečů. Výsledky testu využilo více než 50 univerzit k řádnému přijímacímu řízení na univerzity. V roce 2025 se očekává, že testy Thinking Assessment proběhnou od ledna do dubna.

Zdroj: https://nhandan.vn/phuong-phap-cham-diem-cua-bai-thi-danh-gia-nang-luc-tsa-post845455.html