Carolyn Nelles, Sylke Langenbeck, Dirk Lubbe, Bettina Doering, Elisa Flach, Christian Götz, Barbara Hinding, J. Lindenmeyer
{"title":"Shows How!","authors":"Carolyn Nelles, Sylke Langenbeck, Dirk Lubbe, Bettina Doering, Elisa Flach, Christian Götz, Barbara Hinding, J. Lindenmeyer","doi":"10.1026/0033-3042/a000632","DOIUrl":null,"url":null,"abstract":"Zusammenfassung: Hintergrund: Die neue psychotherapeutische Approbationsordnung sieht erstmals eine anwendungsorientierte Parcoursprüfung vor, in der die therapeutische Handlungskompetenz im Umgang mit Simulationspersonen in fünf Stationen jeweils à 20 Minuten geprüft wird. Fragestellung: Die Pilotstudie, die in Kooperation mit dem IMPP durchgeführt wurde, diente der explorativen Untersuchung des Aufwands, des Schwierigkeitsgrades sowie der Durchführbarkeit und Reliabilität der neuartigen Prüfungsform innerhalb der psychotherapeutischen Ausbildung. Methode: Es wurden zwei Parcours mit jeweils fünf Stationen online mit 39 Studierenden am Ende des dritten Semesters des Masterstudiengangs „Klinische Psychologie und Psychotherapie“ entsprechend der Vorgaben der neuen Approbationsordnung durchgeführt. In jeder Station wurde die therapeutische Handlungskompetenz durch zwei Prüfende anhand vorgegebener Bewertungsbögen bepunktet. Als Bestehensgrenze wurde eine Prüfungsleistung von mindesten 60 % der maximalen Punktzahl in jeder einzelnen Station festgelegt. Die Beurteilungsübereinstimmung innerhalb der einzelnen Stationen wurde mittels Intraklassen-Korrelation (ICC) ermittelt. Für den Gesamtwert der Prüfungsleistung wurden die interne Konsistenz mittels Cronbach’s Alpha sowie der Generalizability-Koeffizient ( G) bestimmt. Ergebnisse: Die 39 geprüften Studierenden erreichten im Mittel 346.29 Punkte ( SD = ± 46.77) von maximal 500 Punkten. Die Durchfallquote betrug damit 59 %. Die Interrater-Reliabilität in den einzelnen Stationen variierte zwischen .091 und .733. In den meisten Stationen war sie befriedigend. Die interne Konsistenz des Gesamturteils betrug α = .85. Der Generalizability-Koeffizient lag für die gesamte Prüfung bei G = .81. Der Gesamtaufwand der Prüfungsdurchführung innerhalb der Hochschule wurde anhand von benötigten Arbeitsstunden bemessen und lag bei ca. 680 Stunden. Diskussion: Es zeigten sich erste Hinweise auf die Qualität der neuen Prüfungsform. Insbesondere war die vorhandene Varianz in den Bewertungen im Wesentlichen auf die Leistung der Studierenden zurückzuführen. Gemeinsam mit den Werten zur internen Konsistenz und zur Prüfenden-Übereinstimmung kann dies als Anzeichen für eine vorhandene Objektivität / Reliabilität der beiden Parcours – im Rahmen der Pilotierung an diesem Standort – gedeutet werden. Die hohe Durchfallquote erfordert weitergehende Untersuchungen. Des Weiteren wäre eine Reduzierung des hohen Aufwandes der Prüfung in dieser Form wünschenswert. Limitationen der Untersuchung sind insbesondere in der geringen, nicht repräsentativen Stichprobengröße zu sehen.","PeriodicalId":51866,"journal":{"name":"Psychologische Rundschau","volume":" ","pages":""},"PeriodicalIF":1.4000,"publicationDate":"2023-06-16","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":"0","resultStr":null,"platform":"Semanticscholar","paperid":null,"PeriodicalName":"Psychologische Rundschau","FirstCategoryId":"102","ListUrlMain":"https://doi.org/10.1026/0033-3042/a000632","RegionNum":4,"RegionCategory":"心理学","ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":null,"EPubDate":"","PubModel":"","JCR":"Q3","JCRName":"PSYCHOLOGY, MULTIDISCIPLINARY","Score":null,"Total":0}
引用次数: 0
Abstract
Zusammenfassung: Hintergrund: Die neue psychotherapeutische Approbationsordnung sieht erstmals eine anwendungsorientierte Parcoursprüfung vor, in der die therapeutische Handlungskompetenz im Umgang mit Simulationspersonen in fünf Stationen jeweils à 20 Minuten geprüft wird. Fragestellung: Die Pilotstudie, die in Kooperation mit dem IMPP durchgeführt wurde, diente der explorativen Untersuchung des Aufwands, des Schwierigkeitsgrades sowie der Durchführbarkeit und Reliabilität der neuartigen Prüfungsform innerhalb der psychotherapeutischen Ausbildung. Methode: Es wurden zwei Parcours mit jeweils fünf Stationen online mit 39 Studierenden am Ende des dritten Semesters des Masterstudiengangs „Klinische Psychologie und Psychotherapie“ entsprechend der Vorgaben der neuen Approbationsordnung durchgeführt. In jeder Station wurde die therapeutische Handlungskompetenz durch zwei Prüfende anhand vorgegebener Bewertungsbögen bepunktet. Als Bestehensgrenze wurde eine Prüfungsleistung von mindesten 60 % der maximalen Punktzahl in jeder einzelnen Station festgelegt. Die Beurteilungsübereinstimmung innerhalb der einzelnen Stationen wurde mittels Intraklassen-Korrelation (ICC) ermittelt. Für den Gesamtwert der Prüfungsleistung wurden die interne Konsistenz mittels Cronbach’s Alpha sowie der Generalizability-Koeffizient ( G) bestimmt. Ergebnisse: Die 39 geprüften Studierenden erreichten im Mittel 346.29 Punkte ( SD = ± 46.77) von maximal 500 Punkten. Die Durchfallquote betrug damit 59 %. Die Interrater-Reliabilität in den einzelnen Stationen variierte zwischen .091 und .733. In den meisten Stationen war sie befriedigend. Die interne Konsistenz des Gesamturteils betrug α = .85. Der Generalizability-Koeffizient lag für die gesamte Prüfung bei G = .81. Der Gesamtaufwand der Prüfungsdurchführung innerhalb der Hochschule wurde anhand von benötigten Arbeitsstunden bemessen und lag bei ca. 680 Stunden. Diskussion: Es zeigten sich erste Hinweise auf die Qualität der neuen Prüfungsform. Insbesondere war die vorhandene Varianz in den Bewertungen im Wesentlichen auf die Leistung der Studierenden zurückzuführen. Gemeinsam mit den Werten zur internen Konsistenz und zur Prüfenden-Übereinstimmung kann dies als Anzeichen für eine vorhandene Objektivität / Reliabilität der beiden Parcours – im Rahmen der Pilotierung an diesem Standort – gedeutet werden. Die hohe Durchfallquote erfordert weitergehende Untersuchungen. Des Weiteren wäre eine Reduzierung des hohen Aufwandes der Prüfung in dieser Form wünschenswert. Limitationen der Untersuchung sind insbesondere in der geringen, nicht repräsentativen Stichprobengröße zu sehen.
期刊介绍:
Herausgegeben im Namen der Deutschen Gesellschaft für Psychologie. Offizielles Organ der Deutschen Gesellschaft für Psychologie, zugleich Informationsorgan des Berufsverbandes Deutscher Psychologen.