Een inleiding tot best practices

WERKANALYSE BEPAALD

De term functieanalyse verwijst naar procedures die zijn ontworpen om beschrijvende informatie te verkrijgen over de taken die door professionals worden uitgevoerd en / of de kennis, vaardigheden of vaardigheden die nodig worden geacht om die taken adequaat uit te voeren. In meer eenvoudige termen verwijzen Brannick en Levine (2002) 1 naar taakanalyse als "ontdekken, begrijpen en beschrijven wat mensen op het werk doen" (p. 1). Het specifieke type informatie dat wordt verzameld voor een taakanalyse wordt bepaald door het doel waarvoor de informatie zal worden gebruikt.

Alternatieve namen voor functieanalyse omvatten taaktaakanalyse, rolafbakening, competentiestudie, praktijkanalyse, rol- en functiestudie en kennisstudie.

DOELANALYSE DOEL

Een functieanalyse levert geldigheidsbewijs voor tewerkstellingsgerelateerde tests, zoals tests die worden gebruikt om werknemers in te huren of te promoten, of om een licentie of certificering te verlenen. Een taakanalyse kan ook worden uitgevoerd om:

  • definieer een jobdomein
  • schrijf een functiebeschrijving
  • maak een gids voor prestatiebeoordelingen
  • ondersteuning selectie- en / of promotiecriteria
  • trainingsbehoeften beoordelen
  • compensatie bepalen
  • criteria voor identificatie ontwikkelen
  • organisatorische vereisten plannen

Een taakanalyse wordt uitgevoerd in overeenstemming met The Standards for Educational and Psychological Testing (1999) ( The Standards ), een uitgebreide technische gids met criteria voor de evaluatie van tests, testmethoden en de effecten van testgebruik. Het werd gezamenlijk ontwikkeld door de American Psychological Association (APA), de American Educational Research Association (AERA) en de National Council on Measurement in Education (NCME). De richtlijnen die in de normen zijn gepresenteerd, door professionele consensus, zijn gekomen om de noodzakelijke componenten van kwaliteitstesten te definiëren. Bijgevolg is het waarschijnlijker dat een testprogramma dat aan de normen voldoet, als geldig en verdedigbaar wordt beoordeeld dan een programma dat dat niet doet.

Zoals vermeld in standaard 14.14,

"Het inhoudsdomein dat onder een kwalificatietest moet vallen, moet duidelijk en gerechtvaardigd worden gedefinieerd in termen van het belang van de inhoud voor prestaties die in de uitoefening van een beroep in aanmerking komen voor een referentie. Er moet een onderbouwing worden gegeven ter ondersteuning van een claim dat de kennis of vaardigheden die worden beoordeeld, zijn vereist voor het leveren van geloofwaardige prestaties in een beroep en zijn consistent met het doel waarvoor het licentie- of licentieprogramma is ingesteld ... Een of andere vorm van functie- of functieanalyse vormt de primaire basis voor het definiëren van het inhoudsdomein ... "(p.161 ) 2

WERKANALYSE METHODEN

Verschillende methoden worden gebruikt om een functieanalyse te voltooien: observatie, interviews, literatuuronderzoek, focusgroepen, interviews met kritische incidenten en enquête. Hieronder staan beschrijvingen van deze processen.

OPMERKING: een getrainde professional voor taakanalyse observeert de behandelaar in verschillende werkomgevingen. Gedrag wordt vastgelegd en de frequentie van taken wordt geanalyseerd.

INTERVIEWS: gevestigde werkgevers worden geïnterviewd over wat ze doen. Ze kunnen ook worden gevraagd wat ze moeten weten om de taken uit te voeren. Deze visie kan waardevolle informatie over de beroepspraktijk verschaffen die niet voldoende kan worden verkregen via algemene vergaderingen en interviews (bijv. Focusgroepen).

LITERATUUROVERZICHT: Academische tijdschriften, professionele tijdschriften en ander gerelateerd materiaal worden beoordeeld. Eerder uitgevoerde functieanalyses worden bestudeerd. Een voorbeeld van een informatiebron over beroepen is te vinden in een internationale database die via internet beschikbaar is. "De internationale standaardclassificatie van beroepen (ISCO) is een hulpmiddel voor het organiseren van banen in een duidelijk gedefinieerde set van groepen volgens de taken en plichten die in de functie worden ondernomen." 3 ISCO wordt onderhouden door de Internationale Arbeidsorganisatie, een gespecialiseerd bureau van de Verenigde Naties.

FOCUSGROEPEN: Prometric maakt gebruik van focusgroepen die een reeks begeleide vragen gebruiken. Deelnemers geven antwoorden die beschrijven wat ze doen en wat ze moeten weten om hun werk uit te voeren. Deze onderzoekstechniek is bijzonder geschikt voor het verzamelen van informatie over nieuwe praktijken, met name die welke van invloed kunnen zijn op het beroep in de komende jaren. Deze aanpak wordt vaak gebruikt in situaties waarin de te identificeren populatie klein is, zoals in een bedrijf dat een of twee personen verwacht in te huren voor een functie of voor een certificatie-instelling met een beperkt lidmaatschap.

KRITIEKE INCIDENT INTERVIEWS: De primaire focus van een interview met kritieke incidenten is de beschrijving van werkgerelateerde problemen en hoe deze worden opgelost. De structuur van de interviews met kritische incidenten vereiste dat professionals nadenken over het gedrag dat als kritisch wordt beschouwd in het beroep en in de prestaties van personen waarop zij toezicht houden om hun verantwoordelijkheden te vervullen. De interviewgids wordt vaak aan de geïnterviewde verstrekt voorafgaand aan het interview en hun antwoorden. Gemeenschappelijke en unieke oplossingen van de geïnterviewden worden geanalyseerd.

ONDERZOEK: De ontwikkeling van een functieanalyse-enquête is een iteratief proces. Een enquête biedt kwantitatieve en kwalitatieve informatie van een groot aantal personen. Het gebruik van enquêtes stelt credentialing-organisaties in staat om de beoordelingen te koppelen aan de functie en is de aanbevolen aanpak voor gestandaardiseerde beoordelingen voor een beroep. De resultaten van een enquête met antwoorden van experts in het veld verhoogt ook de inhoudsvaliditeit van de enquête.

ONTWIKKELING VAN DE ONDERZOEK

Hieronder staan de aanbevolen stappen in de ontwikkeling van enquêtes en de analyse van de resultaten.

ACTIVITEIT 1. ONTWIKKEL EEN VOORLOPIGE LIJST MET ONDERZOEKSCOMPONENTEN
Afhankelijk van de focus van de enquête worden achtergrond (demografische) vragen, taken, kennisverklaringen en / of andere componenten opgesteld met behulp van eerdere functieanalyses, gepubliceerde literatuur en / of materiedeskundigheid.

ACTIVITEIT 2. VERGADERING VAN TAKKRACHT
Een Task Force-comité, doorgaans bestaande uit 12 tot 15 vakdeskundigen die representatief zijn voor het beroep (bijvoorbeeld geografische regio; werkomgeving; jarenlange ervaring), wordt bijeengeroepen voor een meerdaagse, persoonlijke vergadering om de voorlopige beoordeling te herzien en te herzien lijst met enquêtecomponenten.

ACTIVITEIT 3. CONSTRUCT ONTWERPANALYSE-ANALYSE ENQUETE EN PILOTSTUDIE
Na de Task Force Meeting wordt een conceptversie van de enquête gemaakt. Een enquête bestaat meestal uit de volgende secties:

  1. Achtergrondinformatie (demografische vragen)
  2. taken
  3. Kennis vaardigheden
  4. Aanbevelingen voor testinhoudsgewichten
  5. Inschrijf opmerkingen

Het is van cruciaal belang dat de enquête (s) duidelijk geformuleerd en volledig inhoudelijk zijn. Dit zorgt ervoor dat enquêtevragen / inhoud en resultaten zinvol kunnen worden geïnterpreteerd. Bovendien is het belangrijk dat enquêtes in een realistisch tijdsbestek kunnen worden ingevuld, waardoor "burn-out van de enquête" wordt voorkomen. Als resultaat van het uitvoeren van kwaliteitsbeoordelingen, kan een goed opgezet onderzoek hoge responspercentages bevorderen. Deze QA-beoordelingen worden hieronder in chronologische volgorde weergegeven.

  • Beoordeling Task Force: het ontwerp van de enquête wordt per e-mail naar de Task Force-commissies gestuurd voor beoordeling en commentaar. Opmerkingen bestaan meestal uit: 1) voorgestelde toevoegingen aan, schrappingen uit of verduidelijking van de taken en kennis; 2) voorgestelde herzieningen van de enquête-instructies en de ratingschalen; en 3) wijzigingen in de vragenlijst van de achtergrondinformatie en de vragen over de opmerkingen in te schrijven. Er wordt een webconferentie gehouden met de leden van de Task Force om de opmerkingen te bespreken. Voorgestelde wijzigingen worden waar nodig in het onderzoeksinstrument geïntegreerd.
  • Piloottest: een kleinschalige piloottest van de enquête wordt uitgevoerd met een kleine groep deskundigen die niet eerder betrokken waren bij de ontwikkeling van enquêtes. Het doel van een piloottest is om te bepalen of de enquête-inhoud duidelijk geschreven en uitgebreid is. Hiermee kunnen de enquête-onderzoekers ook de doorlooptijd van de enquête verzamelen en bepalen. Er wordt een webconferentie gehouden met de leden van de Task Force om de opmerkingen van de pilootdeelnemers te bespreken.

ACTIVITEIT 4. BEHEER VAN DE ONDERZOEK
De enquête wordt afgenomen bij een representatieve groep deelnemers van voldoende grootte om ervoor te zorgen dat de resultaten van de taakanalyse geldig zijn. Kritieke subgroep (bijv. Geografische regio; werkomgeving; jarenlange ervaring) reacties worden gemonitord tijdens enquêtebeheer om de mogelijkheid te bepalen om afzonderlijke gegevensanalyses uit te voeren.

Strategieën voor het verhogen van de enquête of de kritische respons van de subgroep omvatten het plaatsen van artikelen / mededelingen op websites en / of geschikte gedrukte / internet geleverde media (tijdschriften, nieuwsbrieven, tijdschriften), of het aanbieden van incentives (bijv. Eenheden voor permanente educatie, een cadeaubon) .

De uitnodiging om deel te nemen aan de enquête-URL wordt gevolgd door ten minste twee herinneringsberichten.

ACTIVITEIT 5. DATAANALYSE UITVOEREN
Aan het einde van de enquête worden de juiste en redelijke analyses bepaald die moeten worden uitgevoerd op basis van het aantal antwoorden. Over het algemeen omvatten deze analyses:

  • Beschrijvende statistieken (frequentieverdelingen) over de achtergrond (demografische) informatie verstrekt door de respondenten.
  • Beschrijvende statistieken (middelen, standaardafwijkingen en / of frequentieverdelingen) voor elk van de enquêtecomponenten, zoals taken of kennisverklaringen voor de totale groep en belangrijke subgroepen, indien van toepassing.
  • Overeenstemmingsindexen en / of variantieanalyse (ANOVA), afhankelijk van de enquêtecomponenten en het aantal antwoorden.

BEOORDELINGSSCHALEN

Zoals opgemerkt, is het primaire doel van de enquête om de belangrijke taken en kennis / vaardigheden te bevestigen om de taak op een geaccepteerd niveau uit te voeren. Er kunnen echter andere schalen worden gebruikt in enquêteonderzoek, op basis van het doel van de functieanalyse.

BELANG
De primaire schaal voor het vaststellen van de geldigheid van inhoud is belangrijk. Hieronder staan typische beoordelingsschalen die worden gebruikt voor het belang van taken en kennis / vaardigheden.

TAKEN
Hoe belangrijk is de uitvoering van de taak in uw huidige positie?
Reactiekeuzes: 0 = van geen belang; 1 = van weinig belang; 2 = van matig belang; 3 = belangrijk; 4 = Heel belangrijk

KENNIS VAARDIGHEDEN
Hoe belangrijk is de kennis / vaardigheid in uw huidige functie?
Reactiekeuzes: 0 = van geen belang; 1 = van weinig belang; 2 = van matig belang; 3 = belangrijk; 4 = Heel belangrijk

PRESTATIE
Soms is het nuttig om informatie te verkrijgen van zowel gevestigde exploitanten in het veld als hun supervisors. In deze situatie is het nuttig om de taken te identificeren die worden uitgevoerd door de gevestigde exploitanten en die welke deel uitmaken van de rol van een supervisor.

TAKEN
Geef aan of u de taak uitvoert of superviseert / beheert. Reactiekeuzen: 0 = De taak niet uitvoeren noch superviseren / beheren; 1 = Voer de taak uit; 2 = Supervisie / beheer van de taak; 3 = Zowel de taak uitvoeren als superviseren / beheren

AANKOOPPUNT
Naast belangrijkheidsratings is het nuttig om te bepalen wanneer de kennis / vaardigheden worden verworven.

KENNIS VAARDIGHEDEN
Wanneer heb je de kennis / vaardigheid voor het eerst opgedaan?
Reactiekeuzes: 0 = ik heb geen kennis van deze kennis / vaardigheid gehad; 1 = Tijdens mijn bacheloropleiding; 2 = Tijdens mijn afstudeerprogramma; 3 = Tijdens het eerste jaar werken; 4 = Tijdens het tweede tot derde jaar werken; 5 = Na het derde jaar werken

De antwoorden voor het acquisitiepunt zijn afgestemd op de leeromgeving van de onderzoekspopulatie. Hieronder ziet u een voorbeeld van een andere reeks antwoorden.

Wanneer moet deze kennis / vaardigheid voornamelijk worden geleerd of verworven?
Responskeuzes: 0 = helemaal niet vereist; 1 = In een niet-gegradueerde universitair programma; 2 = Tijdens een erkend trainingsprogramma; 3 = In training op het werk voorafgaand aan certificering; 4 = In certificering na de training; 5 = In een permanente educatie programma na certificering

Om enquêtereacties te evalueren, moeten criteria voor het opnemen of uitsluiten van taken en / of kennis / vaardigheden worden vastgesteld.

CRITERIE VOOR INTERPRETATIE VAN BELANGRIJKE BEOORDELINGEN
Aangezien een hoofddoel van de enquête is ervoor te zorgen dat alleen gevalideerde taken en kennis / vaardigheden worden opgenomen in de ontwikkeling van testspecificaties, moet een criterium (knippunt) worden vastgesteld.

Een criterium dat doorgaans wordt gebruikt, is een gemiddelde belangrijkheidsbeoordeling die het middelpunt tussen redelijk belangrijk en belangrijk weergeeft. Voor de belangrijkheidsschaal die in veel onderzoeken wordt gebruikt, is de waarde van dit criterium 2,50. Zoals hierboven opgemerkt, varieert de belangrijkheidsschaal van 0 = van geen belang tot 4 = zeer belangrijk. Dit criterium is consistent met de bedoeling van inhoudsvaliditeit, namelijk het meten van alleen belangrijke taken of kennis / vaardigheden in het credentialing examen.

Definitie van Pass-, Borderline- en Fail-categorieën voor taak- en kennisgemiddelde ratings

Middelen
Voorbij lopen Op of boven 2,50
grens 2,40 tot 2,49
Fail Minder dan 2,40

Antwoorden op de enquête worden door de commissie gebruikt om geïnformeerde aanbevelingen te doen over de inhoud van het examen. De volgende gegevens worden gepresenteerd: Het primaire doel van veel functieanalyses is het leveren van geldigheidsbewijs voor het maken van werkgerelateerde tests, zoals tests die worden gebruikt om werknemers in dienst te nemen of te promoten, of om een licentie of certificering te verlenen. Om het maken van deze onderzoeken te vergemakkelijken, moeten testspecificaties (ook wel examenspecificaties, een examenblauwdruk of een testoverzicht genoemd) worden gemaakt. Om de specificaties vast te stellen, worden de resultaten van de functieanalyse-enquête gepresenteerd aan een commissie bestaande uit 12 tot 15 vakdeskundigen die representatief zijn voor het beroep (bijvoorbeeld geografische regio; werkomgeving; jarenlange ervaring). De commissie zou een deel van de leden van de Task Force en nieuwe deskundigen op het gebied van onderwerpen moeten omvatten. TESTSPECIFICATIES

  • Antwoorden op de vragen van de achtergrondinformatie-enquête
  • Beoordelingen voor taak- en kennis / vaardigheden schalen
  • Enquête-opmerkingen van respondenten

De commissie beveelt de inhoudweging (percentage items) aan voor het examen. Na controle van commissie- en enquêtegegevens worden de optimale procentuele gewichten voor elk domein bepaald. De gewichten van de testinhoud kunnen worden gebruikt als leidraad voor verdere onderzoeksontwikkelingsactiviteiten, waaronder het schrijven van items en het samenstellen van examens.

OVERZICHT

Taakanalyse neemt een multi-methodebenadering om de taken te identificeren die nodig zijn om een taak uit te voeren en de kennis / vaardigheden die nodig zijn om deze taken uit te voeren. Door dit onderzoek krijgt een organisatie een actueel perspectief op rollen en verantwoordelijkheden van een beroep op basis van empirisch onderzoek om ervoor te zorgen dat de organisatorische initiatieven in lijn blijven met belangrijke huidige, opkomende en toekomstige praktijken. Deze informatie biedt ook de basis voor psychometrisch verantwoorde en juridisch verdedigbare onderzoeken.

1 Brannick, MT & Levine, EL (2002). Taakanalyse: methoden, onderzoek en toepassingen voor Human Resource Management in het nieuwe millennium. Thousand Oaks: Sage.2 American Educational Research Association, American Psychological Association, National Council on Measurement in Education. (1999). De normen voor educatief en psychologisch testen. Washington, DC: American Psychological Association.3 http://www.ilo.org/public/english/bureau/stat/isco/index.htm. Ontvangen op 12 februari 2008.

Keer terug naar de testefficiëntie en wettelijke verdedigbaarheidspagina