Indipendentemente dal fatto che un esame sia basato su computer o offerto su supporto cartaceo, le sfide relative al suo sviluppo, tra cui sicurezza, editing o revisione psicometrica e difendibilità giuridica, rimangono le stesse. Oltre a questi problemi "secolari", gli esami basati su computer o Internet, poiché vengono erogati in modo più ampio, offrono un ulteriore livello di rischio, soprattutto per quanto riguarda la sicurezza degli esami.
Per affrontare le sfide di test in corso e nuove, le organizzazioni sono ben servite seguendo una serie standard di processi per lo sviluppo degli articoli di test e la modifica psicometrica. Ad esempio, molte organizzazioni utilizzano più autori di articoli per sviluppare il contenuto dell'esame. Sebbene questa sia una pratica comune, può portare a variazioni nello stile, nel formato o nella difficoltà degli elementi di prova. Una guida di stile con modelli e standard e regole di sviluppo degli articoli può fare molto per migliorare la coerenza, il formato e la varietà degli articoli. Inoltre, la formazione per lo sviluppo dei contenuti può garantire che gli autori dispongano degli strumenti per sviluppare oggetti e modelli di oggetti credibili e difendibili che possono essere utilizzati per creare diverse varianti della stessa domanda, aumentando così le dimensioni della banca degli articoli in un breve periodo di tempo.
La valutazione statistica degli articoli di prova sul campo è fondamentale per ottenere feedback su prestazioni degli articoli specifici, livelli di esposizione, modelli di risposta e livelli cognitivi. Questa intelligenza consente la revisione dei processi di sviluppo degli articoli e il feedback per gli sviluppatori specifici degli articoli di prova, contribuendo a determinare ciò che è efficace e come gli articoli vanno sul campo. Ciò consente inoltre all'organizzazione di prendere decisioni su conservazione, modifica e assegnazione degli articoli. Le misurazioni relative all'utilizzo e all'esposizione sono utili per determinare quando è necessario aggiornare le banche di articoli o creare nuovi articoli interamente.
Qualsiasi organizzazione che sviluppa o amministra test dovrebbe essere consapevole del processo di editing psicometrico che include la valutazione dei livelli di difficoltà degli oggetti e tiene conto di cose come la grammatica, la sensibilità e lo stile. La psicometria prevede anche la revisione della forma e della funzione del test, come opzioni parallele, informazioni sufficienti per rispondere alla domanda e lunghezza della risposta.
L'obiettività nello sviluppo di articoli e test è estremamente importante e, in quanto tale, l'editing psicometrico viene eseguito al meglio da professionisti dello sviluppo di test, non da esperti in materia o autori di articoli. Gli individui formati nella complessità dell'editing psicometrico valutano gli oggetti in una luce diversa e più critica rispetto agli esperti in materia o agli autori di articoli. Ciò non significa che gli esperti in materia non siano parte integrante del processo; anzi. È importante avere la revisione e l'approvazione dell'elemento modificato finale da parte di esperti in materia nel campo appropriato.
Gli articoli sviluppati per qualsiasi forma di test devono essere legalmente difendibili per garantire che l'organizzazione sia protetta in caso di contestazione legale. L'implementazione di un processo standard per lo sviluppo degli articoli e la revisione psicometrica, come discusso sopra, può massimizzare la difendibilità di un'organizzazione.
La valutazione della difendibilità legale comprende una revisione critica dell'esame sia dal punto di vista del contenuto che psicometrico per garantire che l'esame sia stato sviluppato secondo lo standard per i test educativi e psicologici. I tribunali rimandano agli standard quando valutano la credibilità dell'esame in questione. La difendibilità legale può essere realizzata attraverso diverse metodologie. L'aspetto più importante del processo di sviluppo è seguire e documentare metodologie standardizzate e includere nel processo personale di sviluppo di test adeguato. Esistono molti passaggi diversi nel processo di sviluppo del test e diverse metodologie che possono essere utilizzate per ciascun passaggio. Ad esempio, quando si determina il punteggio per un esame, è possibile utilizzare processi come Angoff modificato o Metodo segnalibro per determinare lo standard appropriato per il passaggio. Ciascuno dei metodi utilizza una tecnica diversa per determinare la barra che un candidato deve raggiungere per ricevere lo stato di passaggio.
Lo sviluppo di grandi banchi di articoli di prova da cui il contenuto del test viene regolarmente aggiornato mitiga anche il rischio di sovraesposizione degli articoli per le società di test. Prendendo l'iniziativa da grandi sviluppatori e amministratori di test, le organizzazioni che gestiscono test basati su computer o test basati su Internet vorranno prendere in considerazione l'utilizzo di banche articoli espanse e aggiornamento programmato degli articoli di test per garantire che i candidati non vedano gli stessi articoli o progetti, riducendo generalmente il probabilità che i candidati condividano informazioni o riconoscano domande utilizzate in precedenza durante una situazione di riesame.
In molti programmi di test ad alto rischio, gli amministratori dei test raccolgono ed esaminano i dati forensi al fine di misurare la frequenza con cui i candidati ai test sono esposti a particolari elementi di test, il tempo medio che i candidati trascorrono sugli articoli e in che modo le risposte dei candidati agli articoli cambiano nel tempo e nell'esposizione. Ciò garantisce l'adeguamento continuo del processo di sviluppo e del contenuto degli articoli per garantire credibilità, legalità e sicurezza.
La moltitudine di fattori da considerare durante lo sviluppo del test conferisce credibilità e integrità all'esame stesso. Le organizzazioni in grado di considerare attentamente la progettazione e l'implementazione dei loro programmi di test in modo proattivo ottengono risultati migliori rispetto alle organizzazioni che non svolgono la dovuta diligenza e pubblicano gli esami in fretta. Un approccio proattivo che tiene conto dello sviluppo degli articoli e delle risorse di modifica nonché dei parametri di sicurezza e IT serve l'organizzazione a lungo termine, poiché aumenta la validità dei test, l'equità dei candidati e offre un livello più elevato di protezione contro le sfide legali.
Molte delle soluzioni bancarie "next generation" svolgono tutte queste funzioni e altre ancora, prendendo le componenti critiche dello sviluppo dei test e facilitando la loro applicazione. L'utilizzo di un potente strumento bancario "next generation" può trasformare l'intero ciclo di vita dello sviluppo dei test. Gli strumenti bancari per articoli possono semplificare il modo in cui gli articoli vengono sviluppati, cambiare il modo in cui vengono mantenuti i programmi di test, evolvere il processo di controllo qualità, aggiornare la sicurezza degli articoli, raccogliere e integrare molteplici aspetti degli articoli, migliorare la qualità dei pool di articoli e facilitare la gestione generale dei programmi di test . Creare un test valido, valido ed efficace non è mai stato così facile.
Ritorna alla pagina relativa all'efficienza del test e alla difendibilità legale