Prometric tiene una amplia experiencia en la transición de programas de entrega en papel a entrega en computadora. El departamento de desarrollo de pruebas cuenta con psicometristas que han participado directamente en la investigación y aplicación de metodologías para ayudar a garantizar un impacto mínimo en el desempeño del candidato durante dicha transición.

Investigación

A medida que las pruebas basadas en computadora (TCC) se han vuelto extremadamente prolíficas en los últimos 10-15 años, la cantidad de investigación de la industria sobre la comparabilidad entre los exámenes en papel y en computadora ha crecido considerablemente. Como era de esperar, los resultados de la investigación que fueron comunes en la introducción inicial de las computadoras en la población de prueba ya no son relevantes para las poblaciones candidatas que ingresan al entorno de prueba hoy. A medida que las poblaciones candidatas han evolucionado en su exposición, acceso y familiaridad con las computadoras, los efectos de la introducción de exámenes basados en computadora se han reducido sustancialmente. Esto ha sido cierto en los múltiples segmentos candidatos, ya que la disponibilidad de computadoras ha aumentado exponencialmente en todos los subgrupos de población.

Al resumir los hallazgos de los múltiples estudios en los últimos 5-10 años (el más reciente se realizó en 1997), los puntos principales identificados en el área de investigación son los siguientes:

1. Los tamaños del efecto en el rendimiento del examen para pruebas basadas en papel versus pruebas basadas en computadora generalmente son estadísticamente insignificantes (p> 0.05), lo que sugiere que no hay una diferencia sustancial entre las dos metodologías de prueba.
2. El análisis de la funcionalidad diferencial de artículos (DIF) en artículos individuales que se entregan en papel o en computadora generalmente indica que cuando los tipos de artículos son propicios para ambas metodologías de entrega, el rendimiento de los artículos en ambos canales de entrega es comparable.
3. Una comunicación clara con el grupo de candidatos con respecto a la entrega de exámenes por computadora puede disminuir aún más la posibilidad de que el modo de entrega afecte el rendimiento del candidato final.
4. La preparación y práctica en un entorno de prueba simulado (a través de un examen de práctica y / o un tutorial antes de la prueba en vivo) puede disminuir la ansiedad por el rendimiento del candidato y contribuir aún más a un resultado de prueba equitativo.

Además de la investigación teórica disponible dentro de la industria de las pruebas, Prometric también tiene experiencia práctica en la evaluación y comparación del desempeño del candidato a través de múltiples canales de entrega. Hemos migrado con éxito a un gran número de clientes de un modo de entrega a otro y hemos evaluado constantemente el rendimiento de los candidatos para garantizar que todos los candidatos tengan una oportunidad justa de mostrar sus conocimientos (independientemente del canal que se utilice). Además, Prometric tiene una serie de clientes que utilizan un modelo de entrega dual (tanto en papel como en computadora), que también permite el monitoreo continuo de la comparabilidad del rendimiento del examen y el rendimiento de los elementos individuales en los múltiples entornos de prueba. Los hallazgos de Prometric son consistentemente similares a los señalados anteriormente de la comunidad de evaluación general y hemos podido desarrollar y avanzar enfoques que aseguran el resultado deseado.

Práctica

Al migrar un programa de examen, hay varios pasos que se deben considerar. Aunque hay una gran cantidad de tareas individuales, las actividades principales incluyen las siguientes:

1. Evaluación del banco de artículos actual Una evaluación del banco de artículos en papel actual generalmente se realiza al comienzo del proyecto para garantizar la aplicabilidad a un entorno informático y para recopilar estadísticas de referencia para una evaluación futura.
2. Modificación de la presentación del ítem Si es necesario, Prometric hace recomendaciones sobre modificaciones de ítems individuales para aumentar la probabilidad de un rendimiento equitativo en el examen general en un entorno basado en computadora.
3. Prepare un esfuerzo de comunicación con los candidatos Promometric trabaja con los clientes para garantizar que se desarrolle una campaña de comunicación adecuada para la población de candidatos antes de la introducción de un nuevo modelo de entrega.
4. Preparar exámenes de muestra y / o tutoriales Prométrica prepara exámenes de práctica y / o tutoriales que se proporcionan al candidato antes de un examen en vivo para aumentar el nivel de comodidad de la población candidata con el modelo de entrega de prueba.
5. Examen y análisis de ítems Usando los datos de línea de base recopilados en el paso 2, Prometric evaluará el examen y el desempeño a nivel de ítem para asegurar la comparabilidad del desempeño del candidato.
6. Monitoreo y mantenimiento continuos La evaluación del modelo de entrega no se detiene después de la confirmación inicial de comparabilidad. Los psicometristas de Prometric monitorearán continuamente el desempeño de los ítems y exámenes de USPS para asegurar que estén funcionando dentro de parámetros estadísticos aceptables y para pronosticar futuras necesidades de desarrollo de pruebas.

Prometric incorpora las metodologías anteriores en nuestros procesos de desarrollo y entrega de pruebas para garantizar un proceso justo, válido y legalmente defendible para todos los candidatos. Nuestra experiencia con la implementación exitosa de exámenes basados en computadora se corresponde con nuestros procesos probados para garantizar la calidad del producto y el rendimiento durante todo el ciclo de vida de los exámenes.

Regresar a la página de prueba basada en papel a computadora