Le organizzazioni che sviluppano e forniscono test computerizzati affrontano molte delle stesse sfide di quelle che lavorano con i test tradizionali su carta e matita, comprese le questioni relative alla sicurezza, al montaggio psicometrico e alla difendibilità legale. Nuovi problemi sorgono anche con i test basati su computer (CBT), in particolare poiché i test sono amministrati più ampiamente via Internet. Questi problemi includono un aumentato rischio di imbrogli candidati e sovraesposizione degli oggetti.

Per affrontare le sfide in corso presentate dai test in generale, nonché alcune delle nuove problematiche relative alla CBT, le organizzazioni devono seguire i processi standard per lo sviluppo degli articoli di test e l'editing psicometrico. Ad esempio, l'utilizzo di più autori di articoli per sviluppare contenuti di test è una pratica comune, ma può portare a variazioni nello stile, nel formato e nella difficoltà degli oggetti di prova. Una guida di stile con modelli e standard e regole di sviluppo degli articoli può fare molto per migliorare la coerenza, il formato e la varietà degli articoli. Inoltre, la formazione per lo sviluppo dei contenuti può garantire che gli autori dispongano degli strumenti per sviluppare oggetti e modelli di oggetti credibili e difendibili che possono essere utilizzati per creare diverse varianti della stessa domanda, aumentando così le dimensioni della banca degli articoli in un breve lasso di tempo.

La valutazione statistica degli articoli di prova sul campo consente alle organizzazioni di ottenere feedback sulle prestazioni degli articoli specifici e sui livelli cognitivi. Questa intelligenza consente la revisione dei processi di sviluppo degli articoli e il feedback per gli sviluppatori specifici degli articoli di prova, contribuendo a determinare ciò che è efficace e come gli articoli vanno sul campo. Ciò consente inoltre all'organizzazione di prendere decisioni su conservazione, modifica e assegnazione degli articoli.

Qualsiasi organizzazione che sviluppa o amministra test dovrebbe essere consapevole del processo di editing psicometrico - uno che include la valutazione dei livelli di difficoltà degli oggetti e tiene conto di cose come la grammatica, la sensibilità e lo stile. La psicometria prevede anche la revisione della forma e della funzione del test, come opzioni parallele, informazioni sufficienti per rispondere alla domanda e lunghezza della risposta.

Con l'importanza attribuita all'obiettività, l'editing psicometrico viene eseguito al meglio da professionisti dello sviluppo di test, non da esperti in materia o autori di articoli. Gli individui formati nella complessità dell'editing psicometrico valutano gli oggetti in una luce diversa e critica rispetto agli esperti in materia o agli autori di articoli. È importante, tuttavia, avere anche la revisione e l'approvazione dell'elemento modificato finale da parte di esperti in materia nel campo appropriato.

Gli articoli sviluppati per CBT e PPT devono essere legalmente difendibili per garantire protezione in caso di contestazione legale. Per garantire la difendibilità legale, le organizzazioni devono implementare un processo standard per lo sviluppo degli articoli e la revisione psicometrica, come discusso sopra.

La valutazione della difendibilità legale comprende una revisione critica dell'esame sia dal punto di vista del contenuto che psicometrico per garantire che l'esame sia stato sviluppato secondo lo standard per i test educativi e psicologici . I tribunali rimandano agli standard quando valutano la credibilità dell'esame in questione. La difendibilità legale può essere realizzata attraverso diverse metodologie. L'aspetto più importante del processo di sviluppo è seguire e documentare metodologie standardizzate e includere nel processo personale di sviluppo di test adeguato. Esistono molti passaggi diversi nel processo di sviluppo del test e diverse metodologie che possono essere utilizzate per ciascun passaggio. Ad esempio, quando si determina il punteggio per un esame, è possibile utilizzare processi come Angoff modificato o Metodo segnalibro per determinare lo standard appropriato per il passaggio. Ciascuno dei metodi utilizza una tecnica diversa per determinare la barra che un candidato deve raggiungere per ricevere uno stato di passaggio.

Per mitigare il rischio di sovraesposizione degli articoli, le società di test sviluppano grandi banchi di articoli di prova da cui il contenuto del test viene regolarmente aggiornato. Prendendo la guida di grandi sviluppatori e amministratori di test, le organizzazioni che gestiscono test basati su computer vorranno prendere in considerazione l'utilizzo di banche articoli espanse e aggiornamento programmato degli articoli di test per garantire che i candidati non vedano gli stessi articoli o progetti, riducendo in genere la probabilità di condivisione dei candidati informazione.

In molti programmi di test ad alto rischio, gli amministratori dei test raccolgono ed esaminano i dati forensi al fine di misurare la frequenza con cui i candidati ai test sono esposti a particolari elementi di test, il tempo medio che i candidati trascorrono sugli articoli e in che modo le risposte dei candidati agli articoli cambiano nel tempo e l'esposizione. Ciò garantisce l'adeguamento continuo del processo di sviluppo e del contenuto degli articoli per garantire credibilità, legalità e sicurezza.

Esistono anche diverse metodologie che possono essere implementate analizzando i risultati del candidato dopo l'esame. Uno di questi tipi di analisi è un'analisi degli elementi differenziali, che valuta le prestazioni del gruppo sugli articoli di prova (i gruppi possono essere definiti in base al genere, all'etnia o ad altri fattori). Gli articoli con prestazioni significativamente diverse tra i gruppi di candidati vengono quindi rivalutati per determinare l'utilizzo futuro.

La moltitudine di fattori da considerare nello sviluppo di contenuti per i test basati su computer tutti danno credibilità e integrità all'esame stesso. Le organizzazioni in grado di valutare attentamente la progettazione e l'implementazione dei loro programmi di test in modo proattivo ottengono risultati migliori rispetto alle organizzazioni che migrano ai test su computer in fretta. Un approccio proattivo che tiene conto dello sviluppo degli articoli e delle risorse di modifica nonché dei parametri di sicurezza e IT serve l'organizzazione a lungo termine, poiché aumenta la validità dei test, l'equità dei candidati e offre un livello più elevato di protezione contro le sfide legali.

Ritorna alla pagina relativa all'efficienza del test e alla difendibilità legale