Prometric memiliki pengalaman luas dalam transisi program dari pengiriman berbasis kertas ke pengiriman berbasis komputer. Departemen pengembangan tes memiliki staf ahli psikometri yang secara langsung berpartisipasi dalam penelitian dan penerapan metodologi untuk membantu memastikan dampak minimal pada kinerja kandidat selama transisi tersebut.

Penelitian

Karena pengujian berbasis komputer (CBT) telah menjadi sangat produktif dalam 10-15 tahun terakhir, jumlah penelitian industri tentang perbandingan antara ujian berbasis kertas dan berbasis komputer telah meningkat pesat. Seperti yang diharapkan, temuan penelitian yang umum pada pengenalan awal komputer ke populasi pengujian tidak lagi relevan dengan populasi kandidat yang memasuki lingkungan pengujian hari ini. Karena populasi kandidat telah berevolusi dalam eksposur, akses, dan keakraban dengan komputer, efek dari pengenalan ujian berbasis komputer telah berkurang secara substansial. Ini telah berlaku di seluruh segmen kandidat ganda, karena ketersediaan komputer telah meningkat secara eksponensial di semua subkelompok populasi.

Dalam merangkum temuan berbagai studi dalam 5-10 tahun terakhir (paling baru dilakukan pada tahun 1997), poin-poin utama yang diidentifikasi dalam bidang penelitian adalah sebagai berikut:

1. Ukuran efek pada kinerja ujian untuk pengujian berbasis kertas versus berbasis komputer umumnya tidak signifikan secara statistik (p> 0,05), menunjukkan tidak ada perbedaan substansial antara kedua metodologi pengujian.
2. Analisis Diferensial Item Fungsionalitas (DIF) pada masing-masing item yang dikirim berbasis kertas versus berbasis komputer biasanya menunjukkan bahwa ketika jenis item kondusif untuk kedua metodologi pengiriman, kinerja pada item di kedua saluran pengiriman sebanding.
3. Komunikasi yang jelas kepada kumpulan kandidat mengenai pengiriman ujian berbasis komputer selanjutnya dapat mengurangi kemungkinan mode pengiriman yang berdampak pada kinerja kandidat akhir.
4. Persiapan dan praktik dalam lingkungan pengujian yang disimulasikan (melalui ujian praktik dan / atau tutorial sebelum pengujian langsung) dapat mengurangi kecemasan kinerja kandidat dan selanjutnya berkontribusi pada hasil pengujian yang adil.

Selain penelitian teoritis yang tersedia di dalam industri pengujian, Prometric juga memiliki pengalaman praktis dalam evaluasi dan perbandingan kinerja kandidat di berbagai saluran pengiriman. Kami telah berhasil memigrasi sejumlah besar klien dari satu mode pengiriman ke mode lainnya dan secara konsisten mengevaluasi kinerja kandidat untuk memastikan bahwa semua kandidat diberikan kesempatan yang adil untuk menampilkan pengetahuan mereka (terlepas dari saluran yang digunakan). Selain itu, Prometric memiliki sejumlah klien yang menggunakan model pengiriman rangkap (berbasis kertas dan berbasis komputer), yang juga memungkinkan pemantauan berkelanjutan terhadap komparabilitas kinerja ujian dan kinerja masing-masing item di berbagai lingkungan pengujian. Temuan Prometric secara konsisten mencerminkan yang disebutkan di atas dari komunitas pengujian umum dan kami telah mampu mengembangkan dan memajukan pendekatan yang menjamin hasil yang diinginkan.

Praktek

Dalam memigrasi program pemeriksaan, ada beberapa langkah yang harus dipertimbangkan. Meskipun ada sejumlah besar tugas individu, kegiatan utama meliputi yang berikut:

1. Evaluasi item bank saat ini Evaluasi bank item berbasis kertas saat ini biasanya dilakukan pada awal proyek untuk memastikan penerapan ke lingkungan berbasis komputer dan untuk mengumpulkan statistik dasar untuk evaluasi di masa mendatang.
2. Modifikasi presentasi item. Jika perlu, Prometric membuat rekomendasi pada modifikasi item individual untuk meningkatkan kemungkinan kinerja yang adil pada keseluruhan ujian dalam lingkungan berbasis komputer.
3. Mempersiapkan upaya komunikasi kepada kandidat. Pekerjaan kosmetik dengan klien untuk memastikan bahwa kampanye komunikasi yang sesuai dikembangkan untuk populasi kandidat sebelum pengenalan model pengiriman baru.
4. Mempersiapkan ujian sampel dan / atau tutorial. Laboratorium mempersiapkan ujian praktik dan / atau tutorial yang diberikan kepada kandidat sebelum ujian langsung untuk meningkatkan tingkat kenyamanan populasi kandidat dengan model pengiriman tes.
5. Ujian dan analisis item Dengan menggunakan data dasar yang dikumpulkan pada langkah # 2, Prometric akan mengevaluasi kinerja tingkat ujian dan item untuk memastikan komparabilitas kinerja kandidat.
6. Pemantauan dan pemeliharaan yang berkelanjutan Evaluasi model pengiriman tidak berhenti setelah konfirmasi awal perbandingan. Psikometri prometric akan terus memantau kinerja item dan ujian USPS untuk memastikan bahwa kinerjanya dalam parameter statistik yang dapat diterima dan memperkirakan kebutuhan pengembangan tes di masa mendatang.

Prometric menyematkan metodologi di atas dalam pengembangan pengujian dan proses pengiriman kami untuk memastikan proses yang adil, sah, dan dapat dipertahankan secara hukum untuk semua kandidat. Pengalaman kami dengan berhasil melaksanakan ujian berbasis komputer disesuaikan dengan proses kami yang telah terbukti untuk memastikan kualitas produk dan kinerja sepanjang siklus hidup ujian.

Kembali ke Kertas Berbasis Halaman Pengujian Berbasis Komputer