Of een examen nu op de computer is gebaseerd of op papier wordt aangeboden, de uitdagingen met betrekking tot de ontwikkeling ervan, waaronder beveiliging, psychometrische bewerking of beoordeling en juridische verdedigbaarheid, blijven hetzelfde. Naast deze "eeuwenoude" problemen, bieden computer- of internet-examens, omdat ze breder worden afgeleverd, een extra laag risico, vooral met betrekking tot examenbeveiliging.

Om voortdurende en nieuwe testuitdagingen aan te gaan, hebben organisaties baat bij het volgen van een standaardset processen voor de ontwikkeling van testitems en psychometrische bewerking. Veel organisaties gebruiken bijvoorbeeld meerdere itemschrijvers om exameninhoud te ontwikkelen. Hoewel dit gebruikelijk is, kan dit leiden tot variaties in de stijl, indeling of moeilijkheidsgraad van het testitem. Een stijlgids met sjablonen en artikelontwikkelingsstandaarden en -regels kan een lange weg helpen bij het verbeteren van de consistentie, het formaat en de variëteit van artikelen. Daarnaast kan training voor de ontwikkeling van inhoud ervoor zorgen dat schrijvers de tools hebben om geloofwaardige, verdedigbare items en itemsjablonen te ontwikkelen die kunnen worden gebruikt om verschillende variaties op dezelfde vraag te creëren, waardoor de omvang van de itembank in een kortere tijd toeneemt.

Statistische evaluatie van testitems in het veld is van cruciaal belang om feedback te krijgen over specifieke itemprestaties, blootstellingsniveaus, antwoordpatronen en cognitieve niveaus. Deze intelligentie maakt de revisie van itemontwikkelingsprocessen en feedback voor specifieke testitemontwikkelaars mogelijk, wat helpt bepalen wat effectief is en hoe de items het in het veld doen. Dit stelt de organisatie ook in staat om beslissingen te nemen over het bewaren, wijzigen en toewijzen van artikelen. Metingen rond gebruik en blootstelling zijn nuttig om te bepalen wanneer het nodig is om itembanken te vernieuwen of nieuwe items volledig te schrijven.

Elke organisatie die tests ontwikkelt of beheert, moet zich bewust zijn van het psychometrische bewerkingsproces dat de evaluatie van itemniveaus omvat en rekening houdt met zaken als grammatica, gevoeligheid en stijl. Psychometrie voorziet ook in de beoordeling van de vorm en functie van het testitem, zoals parallelle opties, voldoende informatie om de vraag te beantwoorden en de lengte van het antwoord.

Objectiviteit in item- en testontwikkeling is uiterst belangrijk, en als zodanig kan psychometrische bewerking het beste worden uitgevoerd door testontwikkelingprofessionals, niet door materiedeskundigen of itemschrijvers. Individuen die getraind zijn in de complexiteit van psychometrische bewerking, beoordelen items in een ander, kritischer daglicht dan experts op het gebied van onderwerpen of schrijvers van items. Dat betekent niet dat materiedeskundigen geen integraal onderdeel van het proces zijn; Integendeel. Het is belangrijk dat het definitieve, bewerkte item wordt beoordeeld en goedgekeurd door materiedeskundigen op het juiste gebied.

Items die zijn ontwikkeld voor elke vorm van testen moeten juridisch verdedigbaar zijn om ervoor te zorgen dat de organisatie wordt beschermd in geval van een juridische betwisting. Het implementeren van een standaardproces voor itemontwikkeling en psychometrische beoordeling, zoals hierboven besproken, kan de weerbaarheid van een organisatie maximaliseren.

Evaluatie van wettelijke weerbaarheid omvat een kritische beoordeling van het examen, zowel vanuit inhoudelijk als psychometrisch perspectief, om ervoor te zorgen dat het examen is ontwikkeld volgens de norm voor educatieve en psychologische tests. De rechtbanken stellen de normen vast bij het beoordelen van de geloofwaardigheid van het examen in kwestie. Juridische verdedigbaarheid kan worden bereikt via verschillende methoden. Het belangrijkste aspect van het ontwikkelingsproces is het volgen en documenteren van gestandaardiseerde methoden en het opnemen van geschikt testontwikkelingspersoneel in het proces. Er zijn veel verschillende stappen in het testontwikkelingsproces en verschillende methoden die voor elke stap kunnen worden gebruikt. Bij het bepalen van de cutscore voor een examen kunnen bijvoorbeeld processen zoals de gemodificeerde Angoff of de bladwijzermethode worden gebruikt om de juiste standaard voor het slagen te bepalen. Elk van de methoden maakt gebruik van een andere techniek om de lat te bepalen die een kandidaat moet bereiken om een passerende status te krijgen.

Het ontwikkelen van grote testitembanken waaruit testinhoud routinematig wordt vernieuwd, vermindert ook het risico van overmatige blootstelling van testitems voor testbedrijven. Onder leiding van de grote testontwikkelaars en beheerders, zullen organisaties die computergebaseerde tests of internetgebaseerde tests beheren, willen overwegen uitgebreide itembanken en geplande testitems te vernieuwen om ervoor te zorgen dat kandidaten niet dezelfde items of ontwerpen zien, in het algemeen de waarschijnlijkheid dat kandidaten informatie delen of eerder gebruikte vragen herkennen tijdens een hertestsituatie.

In veel testprogramma's met hoge inzet verzamelen en onderzoeken testbeheerders forensische gegevens om te meten hoe vaak testkandidaten worden blootgesteld aan bepaalde testitems, de gemiddelde tijd die kandidaten aan items besteden en hoe de reacties van kandidaten op items veranderen in de loop van de tijd en blootstelling. Dit zorgt voor de voortdurende aanpassing van het itemontwikkelingsproces en de inhoud om geloofwaardigheid, wettigheid en veiligheid te garanderen.

De veelheid van factoren waarmee rekening moet worden gehouden tijdens de ontwikkeling van de test, geeft geloofwaardigheid en integriteit aan het examen zelf. Organisaties die het ontwerp en de implementatie van hun testprogramma's zorgvuldig kunnen overwegen, doen het proactief beter dan organisaties die de due diligence niet uitvoeren en snel examens publiceren. Een proactieve benadering die rekening houdt met de ontwikkeling en bewerking van artikelen, evenals beveiligings- en IT-parameters, dient de organisatie op de lange termijn beter, omdat het de testvaliditeit en de eerlijkheid van de kandidaten verhoogt en een hoger niveau van bescherming biedt tegen juridische uitdagingen.

Veel van de oplossingen voor itembanking van de "volgende generatie" vervullen al deze functies en meer - ze nemen de kritieke componenten van testontwikkeling en vergemakkelijken de toepassing ervan. Met behulp van één, krachtig itembank-tool van de "volgende generatie" kan de hele testontwikkeling levenscyclus worden getransformeerd. Tools voor itembankieren kunnen de manier waarop items worden ontwikkeld stroomlijnen, de manier wijzigen waarop testprogramma's worden onderhouden, het kwaliteitscontroleproces evolueren, itembeveiliging upgraden, meerdere aspecten van items verzamelen en integreren, de kwaliteit van itempools verbeteren en het algemene beheer van testprogramma's vergemakkelijken . Een degelijke, geldige en effectieve test maken was nog nooit zo eenvoudig.

Keer terug naar de testefficiëntie en wettelijke verdedigbaarheidspagina