Met APA PyscTests® biedt de American Psychological Association (APA) een gezaghebbende bron van gestructureerde informatie over tests die van belang zijn voor verschillende vakgebieden. Onlangs hebben we Alvin Walker, Jr., Director for Research Products bij de APA, geïnterviewd en hij gaf ons inzicht in de missie van APA PsycTests. Op basis van zijn rijke en gevarieerde carrière in de klinische praktijk, onderzoek en informatiewetenschap bespreekt Walker hoe PsycTests psychologisch onderzoek en onderwijs ondersteunt door toegang te bieden tot betrouwbare, niet-commerciële testinstrumenten en essentiële psychometrische data.
Kunt u ons iets vertellen over uw achtergrond en ervaring op het gebied van psychologie en hoe dit uw werk bij APA PsycTests heeft beïnvloed?
Ik heb mijn bachelor- en masterdiploma in psychologie behaald aan de George Washington University. Tijdens mijn carrière in de psychologie heb ik veel verschillende functies bekleed. Aan het begin van mijn carrière werkte ik bij een door de federale overheid gefinancierd psychiatrisch academisch ziekenhuis, waar ik geestelijke gezondheidszorg verleende en patiënten hielp bij het bereiken van hun therapeutische doelen. Na een korte periode in de klinische praktijk te hebben gewerkt, nam ik een functie als onderzoeker aan bij een adviesbureau in Washington, DC, waar ik me richtte op sociaalwetenschappelijk onderzoek en mijn onderzoeksvaardigheden kon aanscherpen. Enkele jaren later trad ik toe tot de Research and Technology Group als civiel onderzoeksmedewerker bij het Naval Air Systems Command van het Amerikaanse Ministerie van Defensie, waar ik nauw samenwerkte met de luitenant-commandant voor Human Factors Engineering. Na bezuinigingen op de afdeling verliet ik deze functie en werd ik aangenomen door de APA als Senior Indexer/Search Analyst en redacteur van de Thesaurus of Psychological Index Terms, een functie die ik meer dan 15 jaar heb bekleed voordat ik mijn huidige functie als Director for Research Products in de afdeling Product Management van de APA ging vervullen.
Kunt u meer vertellen over APA PsycTests en het belangrijkste doel?
APA PsycTests werd 13 jaar geleden gelanceerd en is een unieke databank van psychologische tests en meetinstrumenten die speciaal zijn ontworpen voor gebruik in de sociale en gedragswetenschappen. APA PsycTests wordt maandelijks bijgewerkt met nieuwe content, wat vaker is dan andere testbronnen voor het vakgebied. In de afgelopen 13 jaar heeft ons zeer bekwame redactieteam meer dan 75.000 testrecords gecreëerd!
Om wat achtergrondinformatie te geven over psychologische tests: de groei en verspreiding van nieuwe tests in de psychologische wetenschap vormt een enorme uitdaging voor psychologen. Elk jaar worden er duizenden nieuwe meetinstrumenten ontwikkeld, waarvan de meeste slechts één keer of hooguit een paar keer worden gebruikt. De redundantie die we zien in tests die hetzelfde gegeven meten, kan de geloofwaardigheid van psychologisch onderzoek in gevaar brengen en wetenschappelijke vooruitgang belemmeren. Gestandaardiseerde formats voor vergelijkingen, statistische analyses en zelfs het repliceren van studies worden moeilijker. Toen APA PsycTests werd gelanceerd, was de visie voor het product dan ook om te helpen vermijden dat onderzoekers tests dupliceren en opnieuw creëren, wat bijdraagt aan deze groei in testinstrumenten.
Het is geen verrassing dat het ontwikkelen van nieuwe tests vanaf stap 1 tijdrovend is, zeer complexe processen met zich meebrengt en zelfs als cognitief veeleisend kan worden beschouwd. Onderzoekers klagen vaak dat ze geen uitgebreide bron van tests hebben waar ze terecht kunnen . Om dit specifieke pijnpunt aan te pakken, hebben we APA PsycTests gecreëerd als een repository van valide en betrouwbare niet-commerciële testinstrumenten, ter aanvulling op de gevestigde commerciële testmarkt. We wilden een product creëren dat niet alleen door onderzoekers, maar ook door studenten en zelfs clinici die werkzaam zijn in de geestelijke gezondheidszorg, gebruikt kan worden.
Hebben kunstmatige intelligentie (artificial intelligence, AI) en machine learning invloed op databanken zoals APA PsycTests?
Absoluut. Een van de dingen waar ik me zorgen over maak, is het gebruik van AI, ChatGPT en andere modellen om nieuwe tests en toets-items te genereren of ontwikkelen. Door de vooruitgang op het gebied van AI, en met name generatieve AI, is het nu eenvoudiger dan ooit om sneller tests te ontwikkelen dan om bestaande tests voor onderzoek te vinden. Maar zoals de geschiedenis heeft aangetoond, betekent sneller niet altijd beter! Door snelheid boven kwaliteit te stellen, kunnen er vaak fouten in de testontwikkeling ontstaan, zoals onduidelijke vragen en vertekende resultaten, terwijl een langzamere, meer doordachte aanpak effectiever zou zijn. Ik vrees dat AI en andere tools uiteindelijk zullen leiden tot meer chaos en verwarring op het gebied van testconstructie en psychometrie. Natuurlijk is AI in testen niet alleen maar negatief. Verantwoorde en ethische AI kan een belangrijke rol spelen in bijvoorbeeld het scoren van testresultaten en statistische analyse van grote hoeveelheden testdata.
Welke soorten tests en evaluaties zijn opgenomen in APA PsycTests?
APA PsycTests omvat een breed scala aan testinstrumenten, waaronder beoordelingsschalen, testsets, screeners, vragenlijsten, checklists, en zelfs vignetten en niet-projectieve technieken. We bieden echter geen tests of instrumenten voor gebruik in onderzoek met dierenpopulaties.
APA PsycTests bevat tests die duizenden verschillende concepten binnen de kernpsychologie, ons dagelijks werk, meten. Omdat psychologie van nature interdisciplinair is, gaat onze scope verder dan deze kern en omvat de databank ook tests om concepten in andere disciplines te meten, zoals verpleegkunde, marketing en reclame, forensisch onderzoek, economie, kunstmatige intelligentie en nog veel meer. We zien APA PsycTests graag als een one-stop-shop voor tests in alle disciplines die praktische toepassingen hebben voor problemen in de echte wereld.
Hoewel we APA PsycTests hebben opgezet als een repository voor niet-commerciële tests die worden gebruikt voor onderzoeksdoeleinden, zijn we samenwerkingsverbanden aangegaan met een aantal commerciële testuitgevers om meer dan metadatarecords van meer dan 1.000 commerciële tests op te nemen. Databankrecords voor dit soort tests zijn uiterst belangrijk omdat ze de niet-commerciële testinstrumenten in APA PsycTests verrijken door vergelijkende gestandaardiseerde testdata te verstrekken.
Op welke manier kunnen academische bibliothecarissen APA PsycTests gebruiken om onderzoek en onderwijs in de psychologie te ondersteunen?
APA PsycTests is een ongeëvenaarde bron voor bibliothecarissen om zowel onderzoekers als studenten te helpen bij het uitvoeren van onderzoek en om hen toegang te geven tot de tools en instrumenten die nodig zijn om dat onderzoek te ondersteunen. Het is een ideaal startpunt voor wetenschappers en studenten om psychometrische analyses of testmethodieken te vinden die ze kunnen gebruiken in hun specifieke onderzoek. Het belangrijkste is dat bibliothecarissen masterstudenten kunnen helpen om talloze uren te besparen bij het ontwikkelen van nieuwe testinstrumenten ter ondersteuning van hun proefschrift. En ten slotte kunnen bibliothecarissen wetenschappers, historici en iedereen die geïnteresseerd is in de geschiedenis van de psychologie helpen om de afstamming, ontwikkeling en evolutie van psychologische tests door de jaren heen te onderzoeken.
Op welke specifieke manieren gebruiken psychologen APA PsycTests?
Psychologen en studenten gebruiken APA PsycTests voor diverse doeleinden. Enkele voorbeelden die meteen te binnen schieten zijn het vinden van psychometrische data over specifieke tests (bijvoorbeeld validiteits- en factorstructuurdata), het vinden van tests voor een specifieke populatie (bijvoorbeeld adolescenten of ouderen), het vinden van tests om specifieke psychologische concepten te meten (bijvoorbeeld emotionele stabiliteit of zelfvertrouwen), en het contact opnemen met de auteur van een test om toestemming te vragen voor het aanpassen of wijzigen van een test.
Het vinden van tests om nieuwe en opkomende concepten te meten (bijvoorbeeld het gebruik van persoonlijke beschermingsmiddelen of de acceptatie van het Covid-19-vaccin), waarvoor waarschijnlijk geen commerciële test bestaat, kan een uitdaging zijn voor onderzoekers. APA PsycTests biedt een zeer nuttige bron voor tests die actuele en hedendaagse concepten meten.
APA PsycTests wordt ook veel gebruikt door docenten en opleiders om psychologische testtheorieën te onderwijzen of om specifieke voorbeelden te vinden ter illustratie van psychometrische concepten of principes in de cursussen en lessen die zij geven.
Ik zou nalatig zijn als ik niet zou vermelden dat we meer dan 500 historische tests hebben opgenomen die alleen in gedrukte vorm beschikbaar waren bij het Cummings Center on the History of American Psychology Archives van de Universiteit van Ohio in Akron. De APA heeft samen met het personeel van het centrum deze oudere tests gedigitaliseerd. Onder deze tests bevinden zich onder meer persoonlijkheidsschalen en intelligentietests uit het begin van de 20e eeuw. Veel van deze tests werden gebruikt voor militaire rekrutering in zowel de Eerste als de Tweede Wereldoorlog. We hebben testgegevens die teruggaan tot het einde van de jaren 1890! Deze tests zijn uiterst belangrijk voor historici die op dit gebied werkzaam zijn. Persoonlijk vind ik deze historische content het meest fascinerende materiaal in APA PsycTests.
Welke belangrijke kenmerken onderscheiden APA PsycTests van andere databanken met psychologische tests?
APA PsycTests heeft veel handige functies! Ik zal er een paar uitlichten.
Een van de beste eigenschappen van APA PsycTests is de uitgebreide gestructureerde informatie over psychologische tests, met bijna 30 beschrijvende metadatavelden voor elke test, wat helpt bij het zeer gericht zoeken en vinden van testinformatie. We leggen het doel van de test vast, een informatieve beschrijving, het type test, de afnamemethode, de beschikbare talen, details over toestemmingen en nog veel meer.
Deze uitgebreide metadata-tagging bespaart onderzoekers tijd door hen te helpen snel en efficiënt de juiste tests voor hun onderzoek te vinden en te identificeren. Het is belangrijk om te vermelden dat APA PsycTests wordt geïndexeerd met behulp van de Thesaurus of Psychological Index Terms, dezelfde thematische woordenlijst die wordt gebruikt voor het indexeren van andere APA-databanken zoals APA PsycInfo® en APA PsycArticles®.
Een andere handige eigenschap die ik erg waardeer, is dat APA PsycTests meerdere versies van een test vastlegt, zodat een onderzoeker versies of aanpassingen van sommige van de oorspronkelijke vroege testinstrumenten kan vinden. Dit was de originele visie voor het produc: het kunnen vinden van korte, beknopte versie of juist een lange versie van een oorspronkelijke test die later is aangepast voor verschillende talen of culturen, verschillende gemeenschappen of verschillende leeftijdsgroepen.
Maar een van de kenmerken waarmee APA PsycTests zich echt onderscheidt van andere testproducten, is de gemakkelijk vindbare psychometrische data. Psychometrische data vormen het belangrijkste kenmerk van elk testproduct. Onderzoekers willen en moeten toegang hebben tot deze data, zoals de betrouwbaarheid en validiteit van een test, gegevens over de factorstructuur en details over het proces van het genereren van items, zodat ze de betrouwbaarheid van testinstrumenten goed kunnen beoordelen.
Bovendien bieden we met één muisklik toegang tot pdf's van tests of testitems die gemakkelijk kunnen worden gedownload, waardoor deze in sommige gevallen vrijwel onmiddellijk voor onderzoek kunnen worden gebruikt. Ongeveer 50% van de tests in APA PsycTests bevat de full-text van een test of testitems.
Ten slotte linken we ook rechtstreeks naar het originele brondocument – het tijdschriftartikel of hoofdstuk – of een andere bron waar de test werd gebruikt of ontwikkeld, wat onderzoekers en studenten helpt om de test en het onderzoek erachter in context te plaatsen. Dit is een functie die onderzoekers zeer waarderen.
Hoe gaat APA PsycTests om met ethische overwegingen met betrekking tot het gebruik van psychologische tests?
APA PsycTests is een databank met niet-commerciële testinstrumenten, dus het gebruik ervan wordt sterk aangemoedigd voor onderzoeks-, opleidings- en onderwijsdoeleinden. Ten minste 60% van de tests in APA PsycTests kan zonder toestemming van de auteur of uitgever worden gebruikt voor onderzoek, en vrij worden gebruikt voor onderwijs- of illustratieve doeleinden. We vermelden altijd de auteur van de test en verstrekken contact- en affiliatiegegevens, en we moedigen onze onderzoekers en studenten aan om dit ook te doen wanneer ze deze tests gebruiken voor hun projecten of wanneer ze overwegen hun werk te publiceren.
Welke bronnen of ondersteuning biedt APA PsycTests om gebruikers te helpen bij het interpreteren en toepassen van de testresultaten?
APA PsycTests bevat ondersteunende documentatie voor sommige tests wanneer deze door de auteur of uitgever aan ons ter beschikking wordt gesteld. Dit materiaal omvat testgidsen, aanwijzingen of instructies, antwoordformulieren, normen en analyses, en andere bronnen ter ondersteuning van de ontwikkeling van de test. Links naar het onderzoek achter de ontwikkeling of het gebruik van de test bieden onderzoekers extra context om het doel van de test te begrijpen, hoe de test werd afgenomen en hoe de resultaten werden gekwantificeerd en geïnterpreteerd.
