Qu'un examen soit informatisé ou offert sur papier, les défis liés à son développement, y compris la sécurité, l'édition ou la révision psychométrique et la défense juridique, restent les mêmes. Outre ces problèmes «séculaires», les examens sur ordinateur ou sur Internet, étant donné qu'ils sont dispensés plus largement, confèrent une couche de risque supplémentaire, en particulier en ce qui concerne la sécurité des examens.

Pour relever les défis actuels et nouveaux en matière de tests, les organisations sont bien servies en suivant un ensemble standard de processus pour le développement des éléments de test et l'édition psychométrique. Par exemple, de nombreuses organisations utilisent plusieurs rédacteurs d'items pour développer le contenu des examens. Bien que cette pratique soit courante, elle peut entraîner des variations dans le style, le format ou la difficulté des éléments de test. Un guide de style avec des modèles et des normes et règles de développement d'élément peut grandement contribuer à améliorer la cohérence, le format et la variété des éléments. De plus, la formation au développement de contenu peut garantir que les rédacteurs disposent des outils pour développer des articles crédibles et défendables et des modèles d'articles qui peuvent être utilisés pour créer différentes variantes de la même question, augmentant ainsi la taille de la banque d'articles en moins de temps.

L'évaluation statistique des éléments de test sur le terrain est essentielle pour obtenir des informations sur les performances spécifiques des éléments, les niveaux d'exposition, les schémas de réponse et les niveaux cognitifs. Cette intelligence permet la révision des processus de développement des articles et des commentaires pour les développeurs d'articles de test spécifiques - aidant à déterminer ce qui est efficace et comment les articles se comportent sur le terrain. Cela permet également à l'organisation de prendre des décisions sur la conservation, la modification et l'affectation des articles. Les mesures entourant l'utilisation et l'exposition sont utiles pour déterminer quand il est nécessaire de rafraîchir les banques d'éléments ou de créer entièrement de nouveaux éléments.

Toute organisation développant ou administrant des tests doit être consciente du processus d'édition psychométrique qui comprend l'évaluation des niveaux de difficulté des éléments et prend en compte des éléments tels que la grammaire, la sensibilité et le style. La psychométrie prévoit également l'examen de la forme et de la fonction des éléments de test, tels que les options parallèles, des informations suffisantes pour répondre à la question et la durée de la réponse.

L'objectivité dans le développement d'éléments et de tests est extrêmement importante, et en tant que telle, l'édition psychométrique est mieux effectuée par des professionnels du développement de tests, et non par des experts en la matière ou des rédacteurs d'articles. Les personnes formées à la complexité de l'édition psychométrique évaluent les articles sous un jour différent et plus critique que les experts en la matière ou les rédacteurs d'articles. Cela ne signifie pas que les experts en la matière ne font pas partie intégrante du processus; au contraire. Il est important que les experts en la matière dans le domaine approprié examinent et approuvent l'élément final édité.

Les éléments développés pour toute forme de test doivent être légalement défendables pour garantir la protection de l'organisation en cas de contestation judiciaire. La mise en œuvre d'un processus standard pour le développement des articles et l'examen psychométrique, comme discuté ci-dessus, peut maximiser la défensibilité d'une organisation.

L'évaluation de la défensibilité juridique comprend un examen critique de l'examen à la fois du point de vue du contenu et du point de vue psychométrique pour s'assurer que l'examen a été développé conformément à la norme pour les tests éducatifs et psychologiques. Les tribunaux s'en remettent aux normes lorsqu'ils évaluent la crédibilité de l'examen en question. La défensibilité juridique peut être réalisée via plusieurs méthodologies. L'aspect le plus important du processus de développement est de suivre et de documenter les méthodologies standardisées et d'inclure le personnel approprié de développement des tests dans le processus. Il existe de nombreuses étapes différentes dans le processus de développement de test et différentes méthodologies qui peuvent être utilisées pour chaque étape. Par exemple, lors de la détermination du score de coupure pour un examen, des processus tels que la méthode Angoff modifiée ou la méthode des signets peuvent être utilisés pour déterminer la norme appropriée pour la réussite. Chacune des méthodes utilise une technique différente pour déterminer la barre qu'un candidat doit atteindre pour recevoir un statut de réussite.

Le développement de grandes banques d'articles de test à partir desquels le contenu des tests est régulièrement actualisé atténue également le risque de surexposition des articles pour les entreprises de test. En prenant l'initiative des grands développeurs et administrateurs de tests, les organisations qui administrent des tests informatiques ou des tests sur Internet voudront envisager d'utiliser des banques d'éléments étendues et un rafraîchissement planifié des éléments de test pour s'assurer que les candidats ne voient pas les mêmes éléments ou conceptions, ce qui diminue généralement la probabilité que les candidats partagent des informations ou reconnaissent des questions déjà utilisées lors d'une nouvelle épreuve.

Dans de nombreux programmes de test à enjeux élevés, les administrateurs de test collectent et examinent des données médico-légales afin de mesurer la fréquence à laquelle les candidats aux tests sont exposés à des éléments de test particuliers, le temps moyen que les candidats passent sur les éléments et la façon dont les réponses des candidats aux éléments changent au fil du temps et de l'exposition. Cela garantit l'ajustement continu du processus de développement des articles et du contenu pour garantir la crédibilité, la légalité et la sécurité.

La multitude de facteurs à prendre en compte lors de l'élaboration du test confère crédibilité et intégrité à l'examen lui-même. Les organisations capables de réfléchir de manière réfléchie à la conception et à la mise en œuvre de leurs programmes de tests se portent mieux que les organisations qui ne font pas preuve de diligence raisonnable et publient les examens à la hâte. Une approche proactive qui tient compte des ressources de développement et d'édition des articles ainsi que des paramètres de sécurité et informatiques sert mieux l'organisation à long terme, car elle augmente la validité des tests, l'équité des candidats et offre un niveau de protection plus élevé contre les défis juridiques.

La plupart des solutions de banque d’articles de «nouvelle génération» remplissent toutes ces fonctions et plus encore, prenant les composants critiques du développement de tests et facilitant leur application. L'utilisation d'un outil de banque d'articles puissant de «nouvelle génération» peut transformer le cycle de vie complet du développement de test. Les outils de banque d'articles peuvent rationaliser la façon dont les articles sont développés, changer la façon dont les programmes de test sont maintenus, faire évoluer le processus de contrôle de la qualité, améliorer la sécurité des articles, rassembler et intégrer plusieurs aspects des articles, améliorer la qualité des pools d'articles et faciliter la gestion globale des programmes de test . Créer un test solide, valide et efficace n'a jamais été aussi simple.

Retour à la page Efficacité des tests et légitimité de la défense