Popis testu: University of Bath English Language Testing for Medical Professionals (UBELT)
Účelem zkoušky je:
· posoudit anglickou úroveň nerodilých mluvčích kandidátů, kteří se ucházejí o odborné pozice v rámci lékařského oboru ve Velké Británii
· rozlišovat mezi kandidáty, jejichž úroveň angličtiny je natolik dobrá, aby dostatečně dobře komunikovala v profesním kontextu rodilého mluvčího a těmi, jejichž úroveň není
· určit oblasti slabin a umožnit doporučení ohledně okolností (pokud existují), za kterých by měli být kandidáti znovu zváženi v případech, kdy je jazyková úroveň kandidáta vyhodnocena jako nižší než požadovaná úroveň.
Obecné pokyny pro tvorbu testů
· Všechny testy jsou prováděny s ohledem na následující: vybraní kandidáti budou pracovat v anglicky mluvícím/rodilém mluvčím prostředí.Vybraní kandidáti budou muset jednat s britskou veřejností i s kolegy.
· Test je určen k identifikaci uchazečů, kteří jsou na vyšších středních a pokročilých úrovních, odpovídajících úrovním B2 až C2 Společného evropského rámce nebo úrovním 2,5 a vyšším UBELT.
· Různé profese si mohou zvolit různé úrovně „průchodu“, odpovídající různým potřebám odborníků v těchto oblastech
Odběratelé testů byli určeni z hlediska:
i. Všichni mají vysokoškolské vzdělání.
ii. Všichni jsou starší 20 let.
iii. Někteří jsou studenty posledního ročníku studia lékařské profese (takové kurzy obsahují složku pracovní praxe/stáže), nebo se může jednat o velmi čerstvé absolventy; v obou případech jejich praxe není široká.
iv. Většina z nich jsou lékaři s pracovními zkušenostmi ve své vlastní zemi.
v. Všichni mají společnou znalost určitých oblastí, obvyklou praktickou rutinu a informace společné jejich profesi.
vi. Někteří se nenaučili anglický jazyk ve formálním učebním prostředí.
vii. Mnozí jsou bez výslovného školení v jazykových testech.
viii. Mnozí nemají předchozí zkušenosti s jazykovými testy.
ix. Mnozí se mohou v testovacím prostředí cítit úzkostlivě nebo nervózně kvůli vysokým sázkám, které jsou s tím spojeny. ix. ix. ix. ix. ix.,ix.,ix.,ix.,ix.,ix.,ix.,ix.,ix.,ix.,ix.,ix.,ix.,ix.,ix.,ix.,ix.,ix.,ix.
x. Drtivá většina těch, kteří se o UBELT pokoušejí, jsou na střední a vyšší jazykové úrovni, odpovídající úrovni B1 a vyšší Společného evropského rámce.
xi. Mnohé byly předem vybrány třetími stranami podle jejich anglické úrovně a klinických znalostí
xii. Většina kandidátů je z evropských jazykových skupin; někteří jsou z mimoevropského jazykového prostředí, ale žijí v evropské zemi (mohou tedy komunikovat ve 3 a více jazycích).
xiii. Většina z nich žije v zemi mimo Velkou Británii, ale někteří již žijí a/nebo pracují ve Velké Británii.
xiv. Všichni chtějí žít a pracovat ve Velké Británii ve své zvolené profesi.
Zpětná vazba výsledků hodnocení odběratelům testů
i. Certifikát ukazuje jejich celkové skóre UBELT a obsahuje popisy jazykových úrovní pro rozsah skóre UBELT.
ii. Výsledky jsou ověřeny e-mailovou žádostí.
iii. Komentáře a zpětná vazba jsou k dispozici na výkon testovacího odběratele.
iv. Pokud odběratelé testů nesplnili požadované skóre své profese, mohou se obrátit na kancelář UBELT a požádat o radu ohledně slabých míst, jak se zlepšit a jak zažádat o opakovanou zkoušku. Taková konzultace je vedena stručně. UBELT nenabízí žádné jazykové kurzy ani kurzy přípravy na testy.
Uživatelé testů byli identifikováni jako odběratelé testů, náborové agentury, zaměstnavatelé zdravotnických profesí v soukromém i veřejném sektoru a profesní rady nebo řídící orgány.
Zpětná vazba k testovaným uživatelům je přes-
Zpětná vazba od testovaných uživatelů k UBELT je přes-
Komunikativním kontextem pro uchazeče bude každodenní život a profesionální, tedy:
Zkušební úkoly souvisejí s širšími tématy profese, neboť se snaží co nejvíce minimalizovat jakékoli výhody, které by mohl mít někdo se specializací na danou profesi.
Zkouška zahrnuje 4 složky, z nichž každá se týká jedné ze čtyř oblastí dovedností, které se v jazykovém testu často používají.Uznává se však, že každá složka zahrnuje do určité míry i užití dalších dovedností a všechny vyžadují úroveň obecné komunikativní kompetence.
Konstrukce a platnost testů UBELT
Účelem testu je spíše posoudit celkovou komunikativní schopnost než posoudit správné používání a znalost anglického jazyka, konstrukty jsou tedy spíše široké než vysoce specifické.
Test upřednostňuje kompetentní jazykovou komunikaci před přísnými pojmy přesnosti. Zatímco přesnost je důležitým faktorem efektivní komunikace, UBELT není hodnocením jednotlivých jazykových položek izolovaně (např. diskrétní gramatické otázky); místo toho se zaměřuje na rozsah schopnosti uchazeče efektivně a vhodně používat angličtinu v daném kontextu.
UBELT podporuje nepřetržitou zpětnou vazbu zahrnující lékařské odborníky, kandidáty a zkoušející a tvoří důležitou součást jeho dalšího vývoje testů.
Obsah UBELTu souvisí s informacemi, tématy a druhy komunikace, které jsou pro danou profesi vyžadovány. Vzhledem k tomu, že skutečná pracovní situace bude ve Velké Británii, test je založen na autentickém rodném jazyce, je však věnována velká pozornost udržení odpovídající úrovně standardního jazyka, stylu a obsahu, aby nedocházelo k diskriminaci těch, kteří nemají odborné nebo oblastní znalosti.
Odborný obsah tedy souvisí s obecnými informacemi a otázkami a hodnocení výkonnosti souvisí s používáním jazyků, komunikačními dovednostmi a strategiemi namísto „klinicky správných“ odpovědí.
Shromažďování informací od profesionálních informátorů za účelem určení vhodného obsahu a souvislostí.
Pilotní test byl proveden s malým počtem farmaceutů z univerzity v Bathu. Jejich zpětná vazba a výsledky testů byly použity k vývoji první verze testu.
· Malá skupina náborářů (všichni samotní lékárníci) absolvovala formální písemné testy a jejich zpětná vazba byla zjišťována osobně, telefonicky a prostřednictvím dotazníků (listopad 2004 a leden 2005). Jejich zpětná vazba byla příznivá.
· Diskuse o potřebách testu a recenze první verze proběhla s ředitelem studií, pokročilých programů ve farmaceutické praxi a terapii na Univerzitě v Bathu.Jeho názor na test byl velmi příznivý.Jeho informace a vstupy byly zaznamenány a byly přímo vloženy do vývoje testu.
· 2 rozhovory byly vedeny s nerodilými mluvčími, kteří pracují v Británii jako lékárníci.Jejich informace a vstupy byly zaznamenány a byly přímo vloženy do vývoje testů.Jeden z nich se také zúčastnil pilotního čtení testu čtení nové verze.
Anglický jazyk a komunikační informace
Jedná se o vlastní oblast odbornosti vývojového týmu. V tom jim pomáhá nezávislý konzultant pro vývoj testů s mnohaletými zkušenostmi s testováním.
Autenticita a Face Validity
Autentičnost je důležitým hlediskem při testování komunikativních jazyků. UBELT se o to snaží mnoha způsoby.
Vlastní procesy a strategie, které jsou kandidáti povinni v testu používat, jsou „autentické“ v tom, že simulují co nejvíce typickou komunikaci v běžných profesních kontextech.
Například v testu mluvení, na rozdíl od mnoha jiných jazykových testů, se zkoušející do určité míry zapojuje do diskuse s uchazečem, aby simuloval přirozenou komunikaci. Také při rozhodování o skóre mluvení bere UBELT v úvahu úroveň interaktivní snadnosti uchazeče a jeho porozumění angličtině tak, jak ji mluví tazatel, a také s přihlédnutím k jazyku, který uchazeč vytváří. Všechny tyto aspekty komunikace jsou zásadní v reálných situacích.
Test psaní používá jednoduché úlohy, které hodnotí jazykové a komunikační dovednosti spíše než formulační formáty a znalost přísných akademických konvencí psaní.
Testy čtení a poslechu používají texty a situace, které jsou čerpány z některých témat a výměn, se kterými se profesionál pravděpodobně setká ve Velké Británii, včetně některých současných hovorových použití. Používají se standardní typy otázek.
Ze zpětnovazebních studií společnosti UBELT jasně vyplynulo, že UBELT je svou délkou a formátem uživatelsky přívětivým testem. Dalším významným bodem je, že má vysoký faktor „face validity“, tj. zahrnuje odborně relevantní úkoly a témata, a tak může uchazečům připadat jako test důvěryhodnější. Díky tomu jsou uchazeči schopni přistupovat k testu s větší důvěrou.
Hodnoticí kritéria a popisy jazykových kompetencí byly vypracovány těmito způsoby:
i. podle současných postupů jazykových testů
iii. po pečlivé kontrole s naším externím konzultantem testů
iv. z empirických dat získaných ze zkušeností zkoušejících, zpětné vazby uživatelů, stejně jako moderování písemných testů a záznamů mluvených testů.
Hodnotící deskriptory a postupy spolehlivosti pro zubní a farmaceutické testy jsou takové povahy, že mohou být použity přímo pro ostatní odborné testy.
Autenticitu zvyšuje také bodovací metoda UBELT, která se zaměřuje na aktuální profesionální výkon potřebný pro danou práci. To je pro náš návrh a realizaci testu zásadní. Zatímco například UBELT zahrnuje do svého hodnocení uchazeče všechny čtyři jazykové dovednosti, celkové skóre je váženo ve prospěch dovedností, které jsou pro práci ve Velké Británii nejvýznamnější.
Nejdůležitější jazykové dovednosti pro každou profesi jsou signalizovány konzultací s profesionálními informátory- praktikujícími odborníky, zaměstnavateli, náboráři a úředníky řídících orgánů. Například v zubním lékařství i farmacii byly přednostně nastaveny mluvení a poslech a byla jim přiřazena odpovídající váha.
Souběžná platnost zahrnuje porovnání skóre uchazečů získaných užitím UBELT s jinými známými měřeními jejich jazykových schopností.
Ve fázi návrhu a pilotní fázi jsou shromažďovány informace o dobrovolnících, aby se zjistilo, do jaké míry se výsledky UBELT shodují s jejich dalšími jazykovými testy, formálními i neformálními (např. od jejich učitelů, jiné jazykové testy, neformální konverzace).
Ve fázi živých testů zkoušející UBELT zaznamenají veškeré připomínky klinických náborářů k výkonu uchazečů při klinických pohovorech a oznámí je zpět řediteli projektu UBELT.
I když je třeba připustit, že žádný jazykový test nemůže nikdy kopírovat složitost reálné komunikativní situace, základním předpokladem všech jazykových testů je, že jazykový test vzorkuje jazykové schopnosti uchazeče, měří je a výsledky mohou poskytnout jasnější představu o jazykové úrovni uchazečů. Z toho se testující a testovací uživatel snaží vytvořit předpovědi o tom, jak dobře bude uchazeč pravděpodobně podávat výkony v budoucích situacích (prediktivní platnost).
V testu UBELT závisí taková interpretace a predikce na úrovni snadnosti, plynulosti a efektivitě kandidáta při používání angličtiny.
Údaje podporující tvrzení UBELT o vysoké úrovni prediktivní platnosti jsou odvozeny ze sledování následných výkonů uchazečů v profesní situaci. Informace z průzkumů jazykových hodnocení po nástupu uchazečů do práce ve Velké Británii jsou shromažďovány pravidelně a vyžadují podporu uchazečů i agentur či zaměstnavatelů.
i. Všechny testy UBELT jsou navrženy podle nákresu.
ii. Všichni tvůrci testů UBELT jsou proškoleni a pracují ve spolupráci s dalšími tvůrci a nadřízeným.
iii. Verze testů čtení a poslechu jsou pečlivě navrženy, kontrolovány a pilotovány podle standardních postupů jazykových testů. Testy jsou pilotovány nejprve s rodilými mluvčími učiteli, poté je test znovu vyhodnocen a podle potřeby přepsán. Testy jsou pak pilotovány se smíšenými skupinami studentů, z nichž někteří znali jiné výsledky hodnocení angličtiny, aby bylo možné provést srovnání s výsledky testu. Do těchto skupin patří dobrovolníci z několika oblastí vědy, včetně farmacie a chemie. Verze testů jsou vzájemně kalibrovány. Data z testů používaných v živých situacích, jsou shromažďována pro statistickou analýzu.
iv. Probíhá zpětná vazba a monitorování komponent. Průzkumníci referují o testovacích událostech; obsahují informace o všech dotazech, komentářích, pozorováních nebo zjištěných odchylkách.Všechny komponenty jsou monitorovány a pravidelně se shromažďují statistiky.
Zásadní význam má spolehlivost a konzistentnost podání a úsudků zkoušejících.Zkoušející UBELT mají vysokou úroveň výuky jazyků a zkušenosti s hodnocením.
V rámci UBELT absolvují zkoušející pečlivé úvodní školení, pravidelnou standardizaci, sebereflexi, moderaci a monitoring.