Kriteriální test je takový, který umožňuje převést výsledek testu na výpověď o chování, které lze očekávat od osoby s tímto výsledkem, nebo o jejím vztahu k určitému předmětu. Většina testů a kvízů, které píší učitelé ve školách, jsou kriteriálně vztažené testy. Jejich cílem je jednoduše zjistit, zda se žák naučil danou látku. Naproti tomu u norm-referenčního testu přeložený výsledek vypovídá o tom, zda si testovaný vedl lépe nebo hůře než ostatní lidé, kteří se testu zúčastnili. Oba termíny původně zavedl Robert Glaser.
Například pokud kritérium zní „Žáci by měli umět správně sečíst dvě jednociferná čísla“, pak by rozumné testové otázky mohly vypadat takto: „2+3 = ?“ nebo „9+5 = ?“. Kriteriálně orientovaný test by vykazoval výkon žáka striktně podle toho, zda jednotlivý žák na tyto otázky správně odpověděl, či nikoli. Normovaný test by informoval především o tom, zda tento student správně odpověděl na více otázek ve srovnání s ostatními studenty ve skupině.
I při testování podobných témat může test, který je určen k přesnému hodnocení zvládnutí, používat jiné otázky než test, který má ukázat relativní pořadí. Je to proto, že některé otázky lépe odrážejí skutečné výsledky žáků a některé testové otázky lépe rozlišují mezi nejlepšími a nejhoršími žáky. (Mnoho otázek bude splňovat obojí.) Kriteriálně orientovaný test bude používat otázky, na které správně odpověděli žáci, kteří danou látku znají. Normativně vztažený test bude používat otázky, na které správně odpověděli „nejlepší“ studenti a na které neodpověděli „nejhorší“ studenti.
Některé testy mohou poskytnout užitečné informace jak o skutečném prospěchu, tak o relativním pořadí. Test ACT poskytuje jak pořadí, tak údaj o tom, jaká úroveň je považována za nezbytnou pro pravděpodobný úspěch na vysoké škole. Někteří namítají, že termín „kritériový test“ je nesprávné označení, protože se může vztahovat jak na interpretaci výsledku, tak na samotný test. V předchozím příkladu lze stejné skóre v testu ACT interpretovat norm-referenčním nebo kriteriálním způsobem.
Kriteriálně-referenční testování bylo v 70. letech 20. století hlavním předmětem psychometrického výzkumu.
Častým nedorozuměním v souvislosti s tímto pojmem je význam kritéria. Mnoho, ne-li většina testů, které se vztahují ke kritériu, zahrnuje tzv. cut-score, kdy zkoušený vyhoví, pokud jeho výsledek překročí cut-score, a nevyhoví, pokud ho nepřekročí (často se nazývá test zvládnutí). Kritériem není cut-score; kritériem je oblast předmětu, kterou má test hodnotit. Kritériem může být například „Žáci by měli být schopni správně sečíst dvě jednociferná čísla“ a cut-score může být, že žáci by měli správně odpovědět na minimálně 80 % otázek, aby prošli.
Kriteriální interpretace výsledku testu určuje vztah k předmětu. V případě testu zvládnutí to znamená, že se porovnáním výsledku s cut-score zjistí, zda zkoušený „zvládl“ určitou úroveň předmětu. Ne všechny testy s referenčním kritériem však mají cut-score a skóre může jednoduše odkazovat na postavení osoby v předmětové oblasti. Příkladem je opět test ACT, který nemá žádné cut-score, ale jednoduše hodnotí znalosti studenta z předmětu na středoškolské úrovni.
Kvůli tomuto častému nedorozumění nazývají některé vzdělávací agentury testy založené na kritériích také testy založené na standardech, protože žáci jsou hodnoceni s ohledem na standardy, které definují, co by „měli“ znát, jak je definováno státem.
Ověřování testů s odkazem na crierion
Standardním postupem pro ověření platnosti normativně vztaženého testu je zkoumání korelací s externími škálami podobného obsahu nebo porovnání výsledků různých skupin. U testů vztažených ke kritériím je důležitější zjistit, jak přesná je míra shody s kritériem, což Retzlaff & Gibertini 1994 označují jako operační charakteristiky testu. Podle nich by tento typ testu měl být ověřován podle pěti kritérií:
Mnoho testů vztažených ke kritériím jsou testy s vysokou mírou úspěšnosti, jejichž výsledky mají pro zkoušeného důležité důsledky. Lze to také popsat jako „když neuspějete, hodně ztratíte“. Příkladem mohou být maturitní zkoušky nebo osvědčení o počátečním zvládnutí a licenční zkoušky, u nichž je nutné test složit, aby bylo možné pracovat v určité profesi.
Některé vzdělávací agentury označují testy založené na kritériích jako hodnocení založené na standardech, kdy jsou žáci hodnoceni s ohledem na standardy, které definují, co by „měli“ umět, jak je definováno státem. Některé testy stanovují normu, podle níž na začátku selhalo 50 až 80 procent studentů, což je vyšší, nikoli nižší míra neúspěšnosti, než je možné při standardní definici 50 procent podprůměrných výsledků.