Organizațiile care dezvoltă și livrează teste computerizate întâmpină multe din aceleași provocări ca și cele care lucrează cu teste tradiționale de hârtie și creion, inclusiv probleme legate de securitate, editare psihometrică și apărare legală. De asemenea, apar probleme noi cu testarea pe computer (CBT), mai ales că testele sunt administrate mai pe larg prin internet. Aceste probleme includ un risc crescut de înșelăciune a candidatului și supraexpunerea elementelor.

Pentru a aborda provocările în curs de prezentare testate în general, precum și unele dintre noile probleme din jurul CBT, organizațiile trebuie să urmeze procesele standard pentru dezvoltarea elementelor de testare și editare psihometrică. De exemplu, utilizarea mai multor scriitori de articole pentru a dezvolta conținutul testelor este o practică obișnuită, dar poate duce la variația stilului, a formatului și a dificultății elementului de testare. Un ghid de stil cu șabloane și standarde și reguli de dezvoltare a elementelor poate parcurge un drum lung în îmbunătățirea consistenței, a formatului și a varietății articolului. În plus, instruirea de dezvoltare a conținutului poate asigura că scriitorii au instrumentele pentru a dezvolta articole credibile, de apărare și șabloane de articole care pot fi utilizate pentru a crea variații diferite ale aceleiași întrebări, crescând astfel dimensiunea băncii de articole într-un timp mai scurt.

Evaluarea statistică a elementelor de testare în domeniu permite organizațiilor să obțină feedback cu privire la performanța specifică a itemilor și la nivelurile cognitive. Această informație permite revizuirea proceselor de dezvoltare a elementelor și feedback-ul pentru dezvoltatorii de itemi de testare specifică - ajutând la determinarea eficienței și a modului în care se predau articolele. Aceasta permite, de asemenea, organizației să ia decizii cu privire la păstrarea, modificarea și atribuirea elementelor.

Orice organizație care dezvoltă sau administrează teste ar trebui să fie conștientă de procesul de editare psihometrică - unul care include evaluarea nivelurilor de dificultate ale articolului și ia în considerare lucruri precum gramatica, sensibilitatea și stilul. Psihomometria prevede, de asemenea, revizuirea formei și funcției articolului de testare, cum ar fi opțiunile paralele, informații suficiente pentru a răspunde la întrebare și lungimea răspunsului.

Având importanța acordată obiectivității, editarea psihometrică este cel mai bine realizată de profesioniștii în dezvoltarea testelor, nu de experți în materie sau de scriitori de articole. Persoanele instruite în complexitatea editării psihometrice evaluează articolele într-o lumină diferită, critică decât experții în materie sau scriitorii de articole. Cu toate acestea, este important să avem, de asemenea, revizuire și aprobare a articolului final, editat de către experți în domeniu corespunzător.

Elementele dezvoltate pentru CBT și PPT trebuie să fie legal de apărare pentru a asigura protecția în cazul unei provocări legale. Pentru a asigura apărarea legală, organizațiile trebuie să implementeze un proces standard pentru elaborarea articolelor și revizuirea psihometrică, așa cum s-a discutat mai sus.

Evaluarea capacității de apărare legală include o revizuire critică a examenului atât din punct de vedere al conținutului, cât și din perspectiva psihometrică pentru a vă asigura că examenul a fost elaborat conform Standardului de testare educațională și psihologică . Instanțele amână standardele atunci când evaluează credibilitatea examenului în cauză. Defensibilitatea legală se poate realiza prin mai multe metodologii. Cel mai important aspect al procesului de dezvoltare este urmărirea și documentarea metodologiilor standardizate și includerea personalului adecvat pentru dezvoltarea testelor în acest proces. Există multe etape diferite în procesul de dezvoltare a testului și diferite metodologii care pot fi utilizate pentru fiecare etapă. De exemplu, atunci când se determină scorul pentru un examen, procese precum Angoff modificat sau Metoda de marcaj pot fi utilizate pentru a determina standardul adecvat pentru trecerea. Fiecare dintre metode utilizează o tehnică diferită pentru a determina bara pe care trebuie să o atingă un candidat pentru a primi un statut de trecere.

Pentru a atenua riscul supraexpunerii elementelor, companiile de testare dezvoltă bănci mari de articole de testare din care conținutul testului este reîmprospătat în mod curent. Preluând conducerea celor mai mari dezvoltatori de teste și administratori, organizațiile care administrează teste bazate pe computer vor dori să ia în considerare utilizarea băncilor de articole extinse și reîmprospătarea programelor de testare pentru a se asigura că candidații nu văd aceleași elemente sau modele, reducând în general probabilitatea de a împărți candidații. informație.

În multe programe de testare cu miză mare, administratorii de teste colectează și examinează datele criminalistice pentru a măsura cât de des sunt expuși candidații la anumite elemente de testare, timpul mediu pe care candidații îl petrec pe articole și modul în care răspunsurile candidaților la articole se schimbă în timp și expunere. Aceasta asigură ajustarea continuă a procesului de dezvoltare a articolului și a conținutului pentru a asigura credibilitatea, legalitatea și securitatea.

Există, de asemenea, diferite metodologii care pot fi implementate analizând rezultatele candidaților după examinare. Unul dintre aceste tipuri de analize este o analiză diferențială a elementelor, care evaluează performanța grupului pe articolele de testare (grupurile pot fi definite în funcție de sex, etnie sau alți factori). Elementele care au un rol semnificativ diferit în cadrul grupurilor de candidați sunt apoi reevaluate pentru a determina utilizarea viitoare.

Multitudinea de factori care trebuie luați în considerare în dezvoltarea de conținut pentru testarea pe calculator asigură credibilitatea și integritatea examenului în sine. Organizațiile capabile să ia în considerare în mod gânditor proiectarea și implementarea programelor lor de testare sunt mai bune decât organizațiile care migrează la testarea computerizată în grabă. O abordare proactivă care contine resursele de dezvoltare și editare a elementelor, precum și securitatea și parametrii IT servește organizația mai bine pe termen lung, deoarece crește validitatea testelor, corectitudinea candidatului și oferă un nivel mai ridicat de protecție împotriva provocărilor legale.

Revenire la pagina privind eficiența testului și definirea legală