De COTAN beoordeelt de kwaliteit van psychodiagnostische instrumenten. Dit zijn bijvoorbeeld tests, vragenlijsten en observatieschalen. Hieronder vindt u meer informatie over het doel van de beoordelingsprocedure en hoe de procedure werkt.
 
Doel beoordelingen
Het doel van de beoordelingen is: 

• Testgebruikers informeren over de kwaliteit van de instrumenten. Deze informatie kan hen helpen bij de keuze van instrumenten. 
• Testauteurs feedback gegeven over de kwaliteit van het door hen ontwikkelde instrument. Het beoordelingssysteem kan voor hen een leidraad zijn bij de ontwikkeling van een test en het schrijven van een handleiding.

Beoordelingssysteem volgens vaste criteria
Alle tests worden beoordeeld met het COTAN Beoordelingssysteem. Het beoordelingssysteem is openbaar. U kunt de pdf van het beoordelingssysteem hier downloaden. Met het beoordelingssysteem worden tests beoordeeld aan de hand van de volgende 7 criteria:

• Theoretische achtergrond 
• Kwaliteit van het testmateriaal 
• Kwaliteit van de handleiding 
• Normen 
• Betrouwbaarheid 
• Begripsvaliditeit 
• Criteriumvaliditeit 

 
Uw test in de beoordelingsprocedure
Wij nemen uw test in de beoordelingsprocedure op als: 

• De test in Nederland verkrijgbaar is.
• De test voor het Nederlands taalgebied is geconstrueerd, vertaald en/of bewerkt.
• De afnameprocedure gestandaardiseerd is. 
• De validiteit òf de betrouwbaarheid òf de normen zijn onderzocht.
• Het instrument voor professioneel gebruik ontwikkeld is.
• Het instrument direct of indirect uitspraken over personen mogelijk maakt.

 

Uw instrument als researchinstrument
Wij nemen uw instrument als researchinstrument op als:

• Het instrument niet officieel is uitgegeven.
• Een normering ontbreekt, zodat individuele toepassing wordt ontraden.
  

Beoordeling tests
Wij beoordelen uw test in de volgende zeven stappen:

1. Insturen
U stuurt uw test in tweevoud naar de COTAN (adres: Postbus 2085
3500 GB Utrecht). Daarnaast stuurt u al het materiaal mee dat relevant is voor de beoordeling. Denk hierbij aan:

• Handleiding 
• Technische verantwoording
• Normtabellen (indien niet opgenomen in de handleiding of verantwoording)  
• Antwoordformulieren 
• Scoringssleutels 
• Artikelen 
• Rapporten 
• Dissertaties 
• Cd’s of dvd’s (bij geautomatiseerde tests)

In uitzonderingsgevallen beoordelen wij het testmateriaal op locatie. Denk hierbij aan moeilijk verplaatsbaar testmateriaal of materiaal dat specifieke eisen stelt aan pc's. Bij online tests moet u twee aparte logins (cotan1 en cotan2) met wachtwoorden aanleveren.

2. Twee beoordelaars
Na het insturen gaat het materiaal onder strikte geheimhouding naar twee beoordelaars. Het toegezonden materiaal lenen we nooit uit, of geven we aan derden ter inzage. We gebruiken het alleen voor de beoordeling door de COTAN en voor de beschrijving in de documentatie. Vervolgens wordt het opgeslagen in het COTAN-archief.

3. Anonieme beoordeling
De beoordelaars verrichten achtereenvolgens een anonieme beoordeling. De beoordelaars worden uitgezocht op deskundigheid en objectiviteit. Auteurs beoordelen nooit hun eigen tests en zijn nooit werkzaam op hetzelfde of een concurrerend instituut.

4. Voorleggen discrepanties
Eventuele discrepanties in de beoordelingen bespreekt de onafhankelijke coördinator met de beoordelaars. Indien nodig schakelt de coördinator een derde deskundige in.

5. Versturen eindbeoordeling
Nadat de eindbeoordeling is geformuleerd, versturen we deze met alle opmerkingen naar de auteur. Deze kan binnen een maand reageren op de beoordeling. De COTAN bestudeert de reactie van de auteur en beslist of de aangedragen gegevens gevolgen hebben voor de beoordeling. De auteur krijgt hierover bericht.

6. Definitieve beoordeling
De definitieve eindbeoordeling wordt vastgesteld en gepubliceerd in de COTAN Documentatie.

7. Herbeoordeling
Doordat nieuwe onderzoeksgegevens beschikbaar komen of doordat een nieuwe handleiding verschijnt, kan een herbeoordeling nodig zijn. De hierboven geschetste procedure doorlopen we daarbij in zijn geheel opnieuw. We starten een herbeoordelingsprocedure niet eerder dan tenminste een jaar na afronding van de voorafgaande beoordeling.


Het beoordelingssysteem bestellen
Wilt u het COTAN Beoordelingssysteem bestellen? Volg dan de procedure in de publicatielijst. NIP-leden betalen € 23,50, niet-leden betalen € 29,50.