THE CALCULATION OF CUT OFF SCORE IN ROMANIAN AS A FOREIGN LANGUAGE PRETEST AND EXAMINATIONS

Abstract

The Calculation of Cut off Score in Romanian as a Foreign Language Pretest and Examinations. While our educational and professional lives have been deeply influenced by our language abilities, companies and institutions rely more and more on formal evidence of these. Thus, organisations issuing language certificates have a great responsibility, related to the quality of the tests that they apply and the validity and reliability of the examinations. An essential element in this whole process is the cut off score, which needs to be set in relation with the purpose of the examination, the structure and the input of the test and the characteristics of the test taking population. The calculation of the cut off score in relation with these factors became central to the examination process for Romanian as a foreign language at Babeș-Bolyai University. The way in which this is set was decided in preparation for the auditing process with ALTE (the Association of Language Testers in Europe), an audit which our suit of examinations passed successfully. We apply the method of contrastive groups, based on the expertise of the test takers’ teachers and on the students’ results for every component of the examination and of pretest. Thus, the limit of passing/failing an examination is not set beforehand and just applied to each examination, all relevant factors being, instead, considered. The procedure we implemented for the calculation resulted in a higher reliability of the test takers’ results and also of the tests in the long term.

Rezumat. Calcularea scorului cut off în pretestările și examenele de română ca limbă străină. Parcursul educațional și viața profesională ne sunt profund influențate de abilitățile noastre lingvistice, în același timp, diverse companii și instituții bazându-se tot mai mult pe dovezi formale ale acestora. Organizațiile care emit certificate lingvistice au, astfel, o responsabilitate foarte mare, legată de calitatea testelor pe care le aplică și de validitatea și fiabilitatea examenelor. Un element esențial în tot acest proces este scorul cut off, care trebuie să fie stabilit în relație cu scopul examinării, cu structura și cu inputul testului, ca și cu caracteristicile candidaților. Calcularea scorului cut off în relație cu acești factori a devenit un element central al procesului de examinare a românei ca limbă străină la Universitatea Babeș-Bolyai. Felul în care scorul cut off este stabilit a fost decis în cadrul procesului de pregătire pentru auditarea examenelor noastre de către Asociația Testatorilor de Limbi din Europa (ALTE), un audit pe care seria noastră de examene l-a trecut cu succes. Aplicăm metoda grupurilor contrastive, care se bazează pe expertiza profesorilor ce le predau candidaților, ca și pe rezultatele studenților obținute pentru fiecare component al pretestării sau al examinării. Astfel, limita la care un anumit examen se trece sau se pică nu este stabilită dinainte și aplicată fiecărei examinări, toți factorii relevanți fiind, în schimb, luați în considerare. Procedura pe care am implementat-o pentru a calcula scorul cut off are ca rezultat o mai mare fiabilitate a rezultatelor obținute de către candidați și, de asemenea, a examenelor pe termen lung.

Cuvinte-cheie: examene de competență lingvistică, pretestare, component al testului, scor cut off, grupuri contrastive, candidați, date personale, procesare de date.