Pädagogische Psychologie
Fachbereich 05

In der Forschung beschäftigen wir uns mit verschiedenen Aspekten der empirischen Bildungsforschung. Dabei stehen die folgenden Fragen im Mittelpunkt:

(a) Wie können bildungsrelevante Messinstrumente durch den Einsatz von künstlicher Intelligenz und Technologie optimiert werden?

(b) Wie sollten bildungsrelevante empirische Daten statistisch modelliert werden?

(c) Welche Erkenntnisse liefern groß angelegte Vergleichsstudien wie PISA, IGLU oder TIMSS über Bildungssysteme?

In aktuellen Projekten beschäftigen wir uns unter anderem mit der Nutzung mit dem Leseverständnis von Viertklässlerinnen und Viertklässlern (Projekt IGLU), mit der Identifikation und individuellen Unterstützung Gefährdeter Schülerinnen und Schüler der Sekundarstufe (Projekte CoBi, CoBi-Transfer und CoBi-Online), der Etablierung und Evaluation eines interdisziplinären Master-Studiengangs zum Einsatz von KI und digitaler Technologien in Bildungsprozessen (Projekt ALI), der Implementation von KI-basiertem Feedback und Assessment u.a. in der Studieneingangsphase (Projekt IMPACT), der Weiterentwicklung des Goethe Test Pro (Projekt GTP+), mit kompetenzorientierten adaptiven Klausuren (Projekt AKGU) und der Erweiterung von Lehr-, Lern- und Prüfungsszenarien um digitale Instrumente und innovative Learning Designs (Projekt DigiTeLL).

In der Lehre sind wir im B.Sc. und M.Sc. Psychologie, in den bildungswissenschaftlichen Anteilen der Lehramtsstudiengänge und dem M.Sc. Klinische Psychologie und Psychotherapie aktiv.

Die Arbeitseinheit war mit einem Beitrag auf dem 13. GEBF-Kongress vertreten, der vom 16. bis 18. März unter dem Motto "Bildungsforschung für technologiebedingte gesellschaftliche Entwicklungen" in München stattfand. Der Vortrag zu den emotionalen Reaktionen und Bearbeitungszeiten bei Anwendung des Antwortformats Answer-Until-Correct in High-Stakes Testsituationen war Teil des Symposiums "Motivationale und emotionale Aspekte der Testbearbeitung".

• Schenk, C., Fink, A., & Frey, A. Emotionale Effekte und Bearbeitungszeiten von Answer-Until-Correct in HighStakes-Testsituationen.

23. März 2026

Das Projekt Comparability-Based Informative Priors for Bayesian Replication in Structural Equation Modeling (CIBR-SEM), konzeptualisiert und geplant von Aron Fink und Christoph König, wurde kürzlich von der Deutschen Forschungsgemeinschaft (DFG) bewilligt. CIBR-SEM umfasst ein Gesamtvolumen von ca. einer halben Million Euro und ist auf drei Jahre angelegt. Es ist im Bayesianischen Kontext angesiedelt und fokussiert zum einen die systematische Entwicklung und Anwendung informativer Prior-Verteilungen für Strukturgleichungsmodelle (SEM), und zum anderen eine Erweiterung bestehender Methoden zur Bewertung von Replikationserfolg. Konkret entwickelt CIBR-SEM ein neuartiges Verfahren zur quantitativen Integration von Heterogenitätsquellen für die Spezifikation von informativen Prior-Verteilungen im Kontext Bayesianischer SEM und illustriert dessen Anwendung für die Bestimmung von Replikationserfolg im Kontext konzeptueller Replikationen in der psychologischen Forschung. Das Projekt CIBR-SEM stellt einen konzeptionellen und methodischen Fortschritt dar, der nicht nur für die psychologische Forschung relevant ist, sondern auch für die allgemeine Bayesianische Replikationsforschung eine grundlegende wissenschaftliche Bedeutung aufweist.

Das Projekt CIBR-SEM wird im Sommer 2026 starten.

23. März 2026

Die Homepage für den neuen Masterstudiengang AI in Learning and Instruction (ALI) ist online! Der Studiengang wurde im Rahmen des gleichnamigen Projekts theoriegeleitet entwickelt und richtet sich an Personen mit einem Bachelor-Abschluss in Psychologie oder Informatik, die sich dafür interessieren, wie KI und digitale Technologie sinnvoll in Lehr- und Lernsettings eingesetzt werden kann. Die neue Homepage enthält alle relevanten Informationen zu dem Studiengang, der ab dem Wintersemester 2026/2027 an der Goethe-Universität angeboten wird.

Den Link zur Homepage finden Sie hier. Informationen zum Bewerbungsprozess sind hier zu finden.

11. März 2026

Christoph König hat ein Kapitel mit dem Titel Bayesian Hierarchical IRT-Modeling in der Elsevier Reference Collection in Social Sciences veröffentlicht. Das Kapitel stellt eine umfassende und zugleich zugängliche Einführung in die Feinheiten Bayesianischer hierarchischer IRT-Modellierung dar. Neben den grundsätzlichen Eigenschaften und Eigenheiten dieser Modellierungsart werden aktuelle Spezifikationen dieser Modelle illustriert. Das praktisch orientierte Kapitel, das sich vornehmlich an angewandte Forschende richtet, demonstriert darüber hinaus die Spezifikation und Schätzung von IRT-Modellen in Stan und brms. Zuletzt werden die Vorteile dieser Modellierungsart anhand zweier kleinerer Simulationsstudien hervorgehoben, die abschließend im Kontext der Leistungsbeurteilung im Bildungsbereich diskutiert werden.

Das Kapitel ist aktuell unter folgender DOI verfügbar:
https://doi.org/10.1016/B978-0-443-26629-4.00177-5

Im Oktober 2026 wird das Kapitel einem Band der zweiten Edition der Encyclopedia of Measurement in Social Sciences zugeordnet und darin veröffentlicht.

18. Februar 2026

Andreas Frey hat ein Buchkapitel in dem Sammelband "Berufliche Kompetenzen erfassen und fördern" veröffentlicht. Der Sammelband präsentiert zentrale Ergebnisse der BMBF-Initiative ASCOT+. In dem Kapitel werden die Ergebnisse zweier Projekte aus der Initiative kommentiert und es wird diskutiert, welche Forschungs- und Entwicklungsaufgaben sich durch die neuen Möglichkeiten der künstlichen Intelligenz für die Kompetenzdiagnostik ergeben.

Die E-Book-Ausgabe des Sammelbands ist kostenlos unter diesem Link verfügbar.

Frey, A. (2025). Kompetenzmessung bei Prüfungen in der beruflichen Bildung - Kommentar zu Schwerpunkt 3. In Velten, S., Abele, S., Seifried, J., & Warwas, J. (Hrsg.) Berufliche Kompetenzen erfassen und fördern: Impulse aus der Initiative ASCOT+ (S. 197 - 201), wbv Media GmbH.

16. Januar 2026

Das produktive und erfolgreiche Jahr ließen wir diesmal im „Homburger Hof“, einer original Frankfurter Äpplerinstitution ausklingen. Laut Arbeitsbericht 2025 sollten wir uns das verdient haben, und daher schwelgten wir in kulinarischen Genüssen in weihnachtlicher Kulisse und alberten beim traditionellen Schrottwichteln herum. Es gab formschöne und sogar nützliche, wenn nicht sogar hochwertige Geschenke, die wir uns in mehreren Runden abjagten. Danach trainierten wir uns die angefutterten Kalorien auf der Bembelkegelbahn des „Hombi“ ab. Beim Kegeln kamen Fähigkeiten zum Vorschein, die wir weder an uns kannten noch jemals wieder benötigen werden. Tuo Liu musste sich viele Neckereien gefallen lassen, weil er die Kugel zu zaghaft rollen ließ. Am Ende des Abends räumte er alle Neune ab und ließ uns erblasst zurück.

Die gesamte Abteilung hofft, dass mit diesem positiven Abschluss ein gutes Jahr für uns alle eingeläutet wird! Wir wünschen den Besuchern dieser Seite fröhliche Weihnachtstage und ein glückliches und erfolgreiches neues Jahr!

19. Dezember 2025

Andreas Frey und Aron Fink haben ein neues Buchkapitel im Sammelband Innovative Digital-Based International Large-Scale Assessments (Springer) veröffentlicht. In ihrem Beitrag untersuchen sie, wie Itempositions­effekte in internationalen Large-Scale-Assessments (ILSAs) kontrolliert werden können, wenn computerisiertes adaptives Testen (CAT) eingesetzt wird.

Itempositions­effekte treten auf, wenn die Position einer Aufgabe im Test (z. B. am Anfang oder Ende) die Antwortwahrscheinlichkeit beeinflusst. Diese Effekte können zu verzerrten Fähigkeitsschätzungen führen, insbesondere bei CAT, wo Aufgaben individuell ausgewählt werden.

Die Studie stellt eine Erweiterung der Continuous Calibration Strategy (CCS) vor, die ein balanciertes statistisches Design nutzt, um Aufgabencluster systematisch zu rotieren. In einer Simulationsstudie unter ILSA-typischen Bedingungen zeigte sich, dass die vorgeschlagene Methode nahezu unverzerrte Fähigkeitsschätzungen liefert und dies unabhängig von der Stärke der Itempositions­effekte.

Darüber hinaus ermöglicht die CCS neue Items bereits während des operationellen Testens zu kalibrieren und birgt somit das Potential den Aufwand für aufwendige Feldstudien in ILSAs erheblich zu reduzieren.

Frey, A., & Fink, A. (2025). Controlling for item position effects when adaptive testing is used in large-scale assessments. In Khorramdel, L., von Davier, M., & Yamamoto, K. (eds.) Innovative Digital-Based International Large-Scale Assessments (pp. 143-167), Springer. https://doi.org/10.1007/978-3-031-90951-1_6

29. Oktober 2025

Die Abteilung feiert Dr. Aron Finks Nachwuchs. Sein Kind wird von klein auf an eines seiner Forschungsthemen herangeführt und bekommt ein maßgefertigtes Kuscheltier namens MBAT (Multidimensional Bayesian Adaptive Testing).

Herzlichen Glückwunsch!

Die Arbeitseinheit war mit zwei Beiträgen auf der diesjährigen Tagung der DGPs-Fachgruppe Methoden und Evaluation vertreten:

• Liu, T., & Fink, A. A Local Nonparametric Framework for Detecting DIF Along a Continuous Covariate Across Diverse IRT Models.
• Schenk, C., Liu, T., Fink, A., & Frey, A. Combining the Answer-Until-Correct Response Format with Bayesian Adaptive Testing.

Die Tagung fand vom 28. September bis 1. Oktober in Berlin statt. Das inhaltliche wie auch das Rahmenprogramm waren – wie jedes Jahr – äußerst inspirierend gestaltet. Ein großes Dankeschön an die Organisatorinnen und Organisatoren!

20. Oktober 2025

Auf der diesjährigen vom 28.09.2025 bis 01.10.2025 an der Freien Universität Berlin ausgerichteten Tagung der DGPs-Fachgruppe Methoden und Evaluation (ausgerichtete von: Steffi Pohl, Michael Eid & Manuel Völkle) wurde Andreas Frey zum Sprecher der Fachgruppe gewählt. Die weiteren Mitglieder des neu gewählten Vorstands sind: Prof. Dr. Steffen Nestler (Beisitzer, Universität Münster), Prof. Dr. Florian Scharf (Kassenwart, Universität Kassel), Dr. Susanne Frick (Jungmitgliedervertreterin, Technische Universität Dortmund) und Dr. Julien Patrick Irmer (stellvertretender Jungmitgliedervertreter, Humboldt-Universität zu Berlin). Die Ziele der neuen Fachgruppenleitung sind:

1. Stärkung Rolle der Methoden in der Psychologie
2. Professionelle Nachwuchsförderung
3. Steigerung von Sichtbarkeit und Outreach der Psychologischen Methodenlehre
4. Erhöhung der Mitgliederanzahl

20. Oktober 2025

Andreas Frey hielt am 17. September 2025 einen Workshop im Rahmen der FDZ- Herbstakademie zu Methoden der empirischen Bildungsforschung am IQB in Berlin.

Large-Scale Assessments (LSAs) wie IGLU, TIMSS, PISA oder die IQB-Bildungstrends liefern verlässliche Schätzungen auf Populationsebene und finden in der allgemeinen und der Fachöffentlichkeit viel Beachtung. Allerdings setzt die Analyse der Daten dieser Studien spezielle Kenntnisse und Fähigkeiten voraus. Der Workshop widmete sich diesen Aspekten und legte dabei seinen Schwerpunkt auf die selbständige Durchführung entsprechender statistischer Analysen mit R.

20. Oktober 2025

Die Arbeitseinheit „Pädagogische Psychologie mit dem Schwerpunkt Beratung, Diagnostik und Evaluation“ war mit einem Beitrag auf der diesjährigen PAEPS-Tagung 2025, der 20. Tagung der Fachgruppe Pädagogische Psychologie, vertreten. Die PAEPS 2025 fand vom 29.09. bis 01.10.2025 unter dem Motto „WEITERDENKEN“ an der Friedrich-Schiller-Universität Jena statt.

Dr. Sarah Bürger stellte mit dem Vortrag „Bildungsbenachteiligungen erkennen und kompensieren – Das CoBi-Projekt“ das an der Arbeitseinheit angesiedelte Projekt CoBi vor. Dabei ging es sowohl um die Evaluation des Programms sowie die Fortführung im Rahmen des Startchancen-Programms.

Weitere Informationen zur Tagung finden Sie unter https://www.fsv.uni-jena.de/50743/paeps-2025.

09. Oktober 2025

Unser Teammitglied Tuo Liu hat am 18. Juli 2025 auf der 1st Oldenburg Open Science Conference (OOSC) an der Carl‑von‑Ossietzky‑Universität Oldenburg ein Poster mit dem Titel „The Self‑Prioritization Effect Database and Preliminary Insights into Age‑Related Individual Differences“ präsentiert. Die von der Open Science Interest Group organisierte Konferenz brachte Forschende und Studierende aus allen Disziplinen zusammen, um Erfahrungen, Herausforderungen und Strategien zur Umsetzung von Open‑Science‑Praktiken auszutauschen. In der lebhaften Poster‑Session stellte Tuo Liu eine neu aufgebaute, freie zugängliche Datenbank vor, die Studien zum Self‑Prioritization Effect bündelt, und berichtete erste Ergebnisse zu altersbedingten Unterschieden in diesem Phänomen.

18. Juli 2025

Tuo Liu hat seine Doktorarbeit mit dem Titel "From Web to Virtual: Modifying Facial Self-Representation in the Digital Era" im Rahmen einer öffentlichen Disputation an der Universität Oldenburg am 15.07.2025 verteidigt.

Wir gratulieren Tuo herzlich zu diesem hervorragend gemeisterten Schritt auf dem Weg zur Promotion!

15. Juli 2025

Marion Schneckenbühl hat ihre Doktorarbeit mit dem Titel "Medienbezogene Selbststeuerungsfähigkeit beim Lernen im Jugendalter – Konzeption und Evaluation einer beratungsbasierten Förderung" im Rahmen einer öffentlichen Disputation am 09.07.2025 verteidigt.

Wir gratulieren Marion herzlich zu diesem hervorragend gemeisterten Schritt auf dem Weg zur Promotion!

09. Juli 2025

Thomas Dreisörner hat den diesjährigen YAVIS-Preis in der Kategorie Praxisnähe erhalten. Der YAVIS-Preis wird jährlich von der Fachschaft Psychologie der Goethe-Universität für herausragende Lehre und besonderes Engagement verliehen.

Herzlichen Glückwunsch!

16. Juni 2025

Unser Teammitglied Tuo Liu hat gemeinsam mit Jing Teng, Kelong Lu, Andrea Hildebrandt und Ning Hao einen neuen Artikel in Consciousness and Cognition veröffentlicht. In der Studie wurden die prädiktiven Rollen der Struktur des semantischen Gedächtnisses und der Assoziationsfähigkeit im divergenten Denken und in der visuellen künstlerischen Kreativität untersucht. Anhand eines Vergleichs zwischen Expert*Innen und Laien zeigen die Autor*Innen, dass diese kognitiven Ressourcen sowohl das divergente Denken als auch die reale visuell-künstlerische Kreativität vorhersagen. Mittels regularisierter Strukturgleichungsmodellierung konnten sie zeigen, dass insbesondere die Struktur des semantischen Netzwerks sowohl das divergente Denken als auch die visuelle Kreativität stark vorhersagt – mit besonders ausgeprägten Effekten in der Nicht-Design-Gruppe. Auch die Assoziationsflüssigkeit sagte unterschiedliche Formen kreativer Leistungen in beiden Gruppen vorher. Diese Ergebnisse erweitern die Assoziationstheorie der Kreativität auf den Bereich der bildenden Kunst und liefern neue Erkenntnisse über die kognitiven Grundlagen künstlerischer Kreativität sowie deren Bedeutung für die Kunsterziehung.

Teng, J., Liu, T., Lu, K., Hildebrandt, A., & Hao, N. (2025). Semantic memory and associative ability as predictors of divergent thinking and visual artistic creativity: An expert-novice comparison. Consciousness and Cognition, 133, Article 103889. https://doi.org/10.1016/j.concog.2025.103889

26. Mai 2025

Am 21. Mai 2025 hielt Andreas Frey eine Gastvorlesung an der Hochschule Hamm-Lippstadt (HSHL). Hier der Text von der Homepage der HSHL:

Das Bund-Länder-Programm ALI (AI and Digital Technologies in Learning and Instruction) wurde nach einem zweistufigen Juryprozess im März 2025 mit einem Preis von 5.000 Euro ausgezeichnet. Dieser Preis des Stifterverbandes und der Dr. Friedrich-Jungheinrich-Stiftung ist an interdisziplinäre Studiengänge im MINT-Bereich gerichtet, die durch innovative Ansätze mehr Studierende gewinnen, Abbruchquoten verringern oder neue Zielgruppen (insbesondere mehr Frauen) gewinnen helfen.

Weiter Informationen zur Auszeichnung finden Sie unter https://www.stifterverband.org/mintchallenge-plus und weitere Informationen zum Studiengang ALI finden Sie unter https://blog.studiumdigitale.uni-frankfurt.de/ali/.

Andreas Frey hat als Mitglied der NCME-Special Interest Group „Large-Scale-Assessments” im Rahmen eines organisierten Symposiums einen Vortrag mit dem Titel „Effects of the Highly Adaptive Testing Design for PISA on the Precision of Plausible Value-Based Population Estimates” (Autoren: Frey, König & Fink) gehalten. In dem Vortrag wurden die Ergebnisse einer Studie vorgestellt, bei der untersucht wurde, wie sich das kürzlich entwickelte Highly-Adaptive-Testing-Design-for-PISA auf die Präzision von Populationsparameterschätzungen auswirkt. Das zugehörige Manuskript wurde zwischenzeitlich zur Publikation eingereicht. Wir gehen davon aus, dass die Ergebnisse der Studie bald nachgelesen werden können.

Die Arbeitseinheit „Pädagogische Psychologie mit dem Schwerpunkt Beratung, Diagnostik und Evaluation“ war mit insgesamt drei Beiträgen auf der diesjährigen DAGStat-Tagung 2025, der 7. Gemeinsamen Tagung der Deutschen Arbeitsgemeinschaft Statistik, vertreten. Die DAGStat 2025 fand vom 24. bis 28. März 2025 an der Humboldt-Universität zu Berlin statt.

Zum einen präsentierten Tuo Liu mit dem Vortrag „Beyond Counts of Attempts: Integrating Action Sequences into Sequential Item Response Theory“ sowie Dr. Aron Fink mit „Effects of the Highly Adaptive Testing Design on Plausible Value-Based Population Estimates in PISA“ aktuelle Forschungsarbeiten zur Modellierung komplexer Antwort- und Testdesign-Daten. Beide Talks fanden in der Session Advances in Item Response Theory-based Measurement of Abilities statt.

Darüber hinaus gestaltete die Arbeitseinheit ein Symposium „Linking, Equating, and Norming in the Context of IRT“. Prof. Dr. Andreas Frey übernahm die Chair-Rolle und schloss das Symposium mit seinem Beitrag „Linking the MaK-adapt Mathematics Test with the German Educational Standards for Mathematics“ ab.

Weitere Informationen zur Tagung finden Sie unter dagstat2025.de.

Unser Paper zum Highly Adaptive Testing Design for PISA erfreut sich großer Aufmerksamkeit in der Fachcommunity. Er war einer der am meisten angesehenen Artikel aller Artikel, die im Jahr 2023 im Journal of Educational Measurement publiziert wurden. Dies freut uns und spornt uns an, die Folgeartikel fertigzustellen, an denen wir zur Zeit arbeiten.

Es handelt sich um folgendes Paper (open access):

Frey, A., König, C., & Fink, A. (2023). A highly adaptive testing design for PISA. Journal of Educational Measurement. Advance online publication. https://doi.org/10.1111/jedm.12382.

Aron Fink, Christoph König und Andreas Frey haben eine neue Studie in der Behavior Research Methods (BRM) veröffentlicht. In dieser beschäftigten sie sich damit wie Fehler in den Itemparametern beim computerisierten adaptiven Testen (CAT) berücksichtigt werden können. In CAT werden Item-Parameter oft als fehlerfrei angenommen, was zu unterschätzten Standardfehlern und ungenauen Fähigkeitsschätzungen führen kann. Unsere Monte-Carlo-Simulation untersuchte drei Ansätze zur Berücksichtigung dieser Unsicherheit. Besonders der Bayesianische Ansatz reduzierte Verzerrung und erhöhte die Präzision der Fähigkeitsschätzungen deutlich und wird empfohlen, wenn große Kalibrierungsstichproben nicht realisierbar sind.

Die Arbeit ist im Open Access frei verfügbar: Fink, A., König, C., & Frey, A. (2025). Accounting for item calibration error in computerized adaptive testing. Behavior Research Methods, 57, 126. https://doi.org/10.3758/s13428-025-02649-8

02. April 2025

Vom 16.3.-21.3.2025 fand das gemeinsam von Andreas Frey und Johannes Hartig organisierte Kolloquium Methoden der empirischen Bildungsforschung im Haus Bergkranz der Goethe-Universität Frankfurt statt. Das diesjährige Programm umfasste 15 Beiträge zu aktuellen methodischen Themen der empirischen Bildungsforschung. Die Teilnehmenden kamen von neun Universitäten und Forschungsinstituten aus ganz Deutschland. Das Kolloquium zeichnete sich auch in diesem Jahr durch sehr angeregte und kollegiale Diskussionen aus. Seitens unserer Arbeitsgruppe gab es die folgenden beiden Beiträge:

• Aron Fink - Einfluss von KI-gestütztem, hochinformativem Feedback auf die Studienleistung
• Andreas Frey - Auswirkung des hochadaptiven Testdesigns für PISA auf PV-basierte Populationsparameter

Wir danken allen Teilnehmenden, dass Sie diese schöne Veranstaltung Jahr für Jahr zu einem vollen Erfolg werden lassen.

01. April 2025

Im Rahmen des ALI-Projektes haben Tuo Liu, Cosima Schenk und Andreas Frey aus unserem Team, in Kooperation mit Stephan Braun, einen neuen Artikel mit dem Titel „A Machine-Learning-Based Approach to Informing Student Admission Decisions“ veröffentlicht. Vor dem Hintergrund der steigenden Bewerberzahlen an Hochschulen wurde ein innovativer, auf maschinellem Lernen basierender Ansatz entwickelt, der Zulassungsentscheidungen optimieren soll. Die Studie untersucht, wie mithilfe historischer Bewerbungsdaten die Anzahl der tatsächlich eingeschriebenen Studierenden präzise vorhergesagt werden kann. Dazu wurden verschiedene Modelle des maschinellen Lernens trainiert und verglichen, um individuelle Einschreibungswahrscheinlichkeiten zu berechnen und daraus aggregierte Prognosen zu erstellen. Der vorgestellte Ansatz berücksichtigt neben der durchschnittlichen Einschreibungsquote auch die statistische Unsicherheit der Prognosen. Somit lässt sich das Risiko einer Über- oder Unterbelegung der verfügbaren Studienplätze gezielt steuern. Anhand empirischer Daten einer deutschen Universität wird gezeigt, dass dieser datenbasierte Entscheidungsprozess herkömmliche Verfahren, die auf festen Einschreibungsraten basieren, deutlich übertrifft.

Die Arbeit ist im Open Access frei verfügbar: Liu, T., Schenk, C., Braun, S., & Frey, A. (2025). A Machine-Learning-Based Approach to Informing Student Admission Decisions. Behavioral Sciences, 15(3), 330.

01. April 2025

Auch Psychometriker*innen können sich verkleiden! Eine Person aus unserer Arbeitseinheit verbirgt sich unter dieser selbstgebastelten Maske des unterdrückten Assistenten Beaker.

03. März 2025

Vom 24. bis 25. Februar hatte unsere Arbeitseinheit Besuch von Professor Jonathan Templin von dem College of Education an der University of Iowa. Während des Forschungsbesuchs wurden aktuelle Studienergebnisse vorgestellt und Ideen für gemeinsame Forschungsprojekte diskutiert.

Wir möchten uns ganz herzlich bei Jonathan für sein aufschlussreiches Feedback und seine wertvollen Einsichten bedanken und freuen uns auf eine zukünftige Zusammenarbeit!

27. Februar 2025 

Die Arbeitseinheiten war mit drei Beiträgen auf der diesjährigen GEBF-Tagung, der 12. Tagung der Gesellschaft für empirische Bildungsforschung vertreten. Hierbei handelte es sich zum einen um die beiden Beiträge in dem Symposium "Methodische Innovationen zur Nutzung computerisierter adaptiver Tests in Bildungskontexten":

• Schenk, C., Fink, A., Naumann, P., & Frey, A.: Psychometrische Modelle für Answer-Until-Correct Items bei computerisierten adaptiven Tests.
• Weiß, L., Fink, A., & Frey, A.: Ein Propensity Score Matching Ansatz zur Analyse von Differential Item Functioning (DIF) bei computerisierten adaptiven Tests.

Zum anderen wirkte Sarah Bürger als Diskutantin an dem Symposium "Wohlbefinden und psychische Gesundheit verschiedener Akteure im Bildungsbereich. Messung, Erklärungen, Entwicklungen" mit. 

Andreas Frey war als Chair sowohl an dem Symposium "Methodische Innovationen zur Nutzung computerisierter adaptiver Tests in Bildungskontexten" als auch an dem Symposium "Methodische Innovationen bei der Konstruktion von Test- und Fragebogenverfahren" beteiligt.

Die GEBF-Tagung fand unter dem Motto "Bildung als Schlüssel für gesellschaftliche Herausforderungen: Interdisziplinäre Beiträge aus der Bildungsforschung" vom 27. bis 29. Januar in Mannheim statt. Weitere Informationen zu der Konferenz sind hier zu finden.

03. Februar 2025

„Golf ist das einzige Spiel, das man genießen kann ohne gut darin zu sein.“ Da wir es sehr genossen haben, waren wir vermutlich sehr schlecht. Allerdings suchten wir uns auch Schwarzlichtminigolf aus, um unter erschwerten Bedingungen zu putten: Dunkelheit, fluoreszierende Farben, 3D-Effekte, Diskomusik und keine Schlägerauswahl! Wir traten als zwei Teams gegeneinander an und schließlich gewann sogar eines ohne dass es Verletzte gab. Das feierten wir im Anschluss mit Pizza und Pasta in einem kleinen italienischen Restaurant auf der Bergerstraße.

Der Chef verteilte den Arbeitsbericht 2024 und drückte uns seine Zufriedenheit, seine Anerkennung und seinen Stolz aus. Danach war nun aber wirklich Zeit für die Bescherung. Die Geschenke überboten sich an Überflüssigkeit, Gewicht und Größe, was uns in Begeisterung und rühmendes Staunen ausbrechen ließ. Deshalb kämpften wir beim Schrottwichteln auch verbissen darum, die kleinsten und leichtesten nach Hause zu tragen, was einigen auch gelang.  

Die gesamte Abteilung hofft, dass mit diesem positiven Abschluss ein gutes Jahr für uns alle eingeläutet wird und wünschen unseren Besuchern dieser Seite fröhliche Weihnachtstage und ein glückliches und erfolgreiches neues Jahr!

Die kürzlich veröffentlichte Studie von Tuo Liu und Co-Autor*innen bietet eine umfassende Einführung in die Anwendung des lokalen Strukturgleichungsmodells (LSEM) zur Analyse nichtlinearer Moderatoreffekte in Strukturgleichungsmodellen (SEM). Traditionelle Ansätze zur Untersuchung von Moderationseffekten konzentrieren sich häufig auf lineare Beziehungen, wodurch die Gefahr besteht, dass komplexere, nichtlineare Effekte übersehen werden. LSEM hingegen ermöglicht es, nichtlineare Effekte ohne Vorannahmen über die Form der Moderation zu identifizieren und zu analysieren.

Anhand eines empirischen Datensatzes wird die Implementierung von LSEM mit dem R-Paket 'sirt' demonstriert. Dabei wird die Vielseitigkeit dieses Ansatzes betont - sowohl für explorative Analysen, bei denen keine spezifischen Hypothesen vorliegen, als auch für konfirmatorische Tests, bei denen bestimmte Moderationsfunktionen vermutet werden.

Die vollständige Publikation ist hier im Open Access verfügbar:

Liu, T., Ding, R., Su, Z., Peng, Z., & Hildebrandt, A. (2024). Modelling nonlinear moderation effects with local structural equation modelling (LSEM): A non-technical introduction. International Journal of Psychology, 59(5), 427–443. https://doi.org/10.1002/ijop.13259.

19. November 2024

Aktuelle Arbeitsergebnisse aus dem Projekt "AI and Digital Technology in Learning and Instruction" (ALI) wurden im Rahmen einer Präsentation auf der diesjährigen Learning AID in Bochum und als Poster auf einem Transfer- und Vernetzungs-Workshop zum Thema "KI in der Hochschulbildung - Was lehren?" in Jena vorgestellt. Des Weiteren wurde ein Poster zu dem Projekt auf dem diesjährigen eLearning-Netzwerktag von studiumdigitale präsentiert.

Das Projekt ALI beschäftigt sich mit der Entwicklung eines interdisziplinären Studienangebots an der Goethe-Universität, welches relevante Kompetenzen bezüglich der Nutzung von KI und digitalen Technologien im Bildungsbereich vermitteln soll. Neben einem für diesen Zweck entwickelten Kompetenzentwicklungsmodell wurden bei den Veranstaltungen auch bisherige Ideen zu Lehrinhalten vorgestellt und diskutiert.

Weitere Informationen zu dem Projekt sind hier zu finden.

07. November 2024

Am 18. Oktober fand an unserer Arbeitseinheit ein Exklusiv-Workshop statt, bei dem Professor Seung Choi von dem College of Education der University of Texas at Austin sein R-Package TestDesign vorstellte und anhand praktischer Beispiele dessen Funktionen erklärte.

Wir bedanken uns bei Seung Choi für den lehrreichen Workshop!

07. November 2024

Die nun veröffentlichte Metaanalyse von Andreas Frey, Tuo Liu, Aron Fink und Christoph König fasst die auf den ersten Blick heterogene Publikationslage zu motivationalen und emotionalen Effekten des computerisierten adaptiven Testens (CAT) zusammen. In der Studie wurden 27 Einzelstudien mit 190 Effektstärken betrachtet. Das motivational-emotionale Erleben geht aus dem Zusammenwirken von Merkmalen des Tests, der Situation und der Person hervor. Vor diesem Hintergrund sind die Gesamteffekte von CAT (als nur einem Testmerkmal) wenig aufschlussreich. Sie waren für Motivation und negatives emotionales Erleben nicht signifikant und für positives emotionales Erleben signifikant nach Publikationsbias-Korrektur. Aufschlussreicher für praktische Testanwendungen sind die in der Studie auch durchgeführten Moderatoranalysen. 
Hier zeigte sich, dass CAT insbesondere bei Tests ohne großen Zeitdruck, mit verminderter mittlerer Aufgabenschwierigkeit, mit der Option Antworten zu revieren und mit Rückmeldungen auf gegebene Antworten als besonders förderlich im Hinblick auf Motivation und emotionales Erleben wirkt.

Die Publikation ist mit Open Access hier erschienen:

Frey, A., Liu, T., Fink, A., & König, C. (2024). Meta-analysis of the effects of computerized adaptive testing on the motivation and emotion of examinees. European Journal of Psychological Assessment, 40(5). 427–443. https://doi.org/10.1027/1015-5759/a000821.

07. November 2024

Die Arbeitseinheit war mit einem Beitrag auf der diesjährigen IACAT-Konferenz, der 9. Konferenz der International Association for Computerized Adaptive Testing, vertreten:

• Fink, A., & Frey, A. (2024, September). Accounting for item calibration error with multidimensional Bayesian adaptive testing [Presentation]. 9th Conference of the International Association for Computerized Adaptive Testing (IACAT), Seoul, South Korea.

Die Tagung fand vom 24. bis 27. September in Seoul statt. Das Konferenzthema lautete "Improving Assessment with Adaptivity and Artificial Intelligence".

Weitere Informationen zu der Konferenz sind hier zu finden.

07. November 2024

Das Forschungskolloquium der Arbeitseinheit findet in diesem Semester voraussichtlich an den folgenden Terminen statt:

• 13. November 2024, 12:30 - 14:00 Uhr
• 27. November 2024, 12:30 - 14:00 Uhr
• 11. Dezember 2024, 12:30 - 14:00 Uhr
• 22. Januar 2025, 12:30 - 14:00 Uhr
• 05. Februar 2025, 12:30 - 14:00 Uhr
• 12. Februar 2025, 12:30 - 14:00 Uhr

In dem Kolloquium werden geplante Studien und aktuelle Forschungsergebnisse von Personen der Arbeitseinheit vorgestellt und diskutiert. Die jeweiligen Themen sowie etwaige kurzfristige Terminänderungen werden per E-Mail zu Beginn der jeweiligen Woche bekannt gegeben. Interessierte Personen werden daher gebeten, sich an Tuo Liu zu wenden (T.Liu@psych.uni-frankfurt.de), um in die E-Mail-Liste mitaufgenommen zu werden und die entsprechenden Informationen zu erhalten.

Studierende seien außerdem darauf hingewiesen, dass es sich bei dem Forschungskolloquium um keine Lehrveranstaltung handelt und für die Teilnahme keine ECTs-Punkte angerechnet werden können.

30. Oktober 2024

Die Arbeitseinheit war mit fünf Beiträgen auf dem 53. DGPs-Kongress in Wien vertreten. Hierbei handelte es sich zum einen um drei Vorträge:

• Fink, A., Gombert, S., Liu, T., & Frey, A.: Using Psychometric Models to Integrate Predictions from Automated Essay Scoring Models.
• Fink, A., Gombert, S., Menzel, L., Weidlich, J., Drachsler, H., & Frey, A.: AI-powered Assessment in Higher Education - Insights from the HIKOF-DL project.
• Schenk, C., Naumann, P., Fink, A., & Frey, A.: Nutzung des Answer-Until-Correct-Antwortformates bei computerisiertem adaptiven Testen. Eine Simulationsstudie zur Untersuchung psychometrischer Merkmale verschiedener Modelle.

Zum anderen wurde auch ein Poster vorgestellt:

• Weiß, L., Fink, A., & Frey, A.: A Propensity Score Matching Approach for the Analysis of Differential Item Functioning in Computerized Adaptive Testing.

Weiterhin wurde ein eintägiger Workshop von Tuo Liu (gemeinsam mit Philipp Franikowski und Andrea Hildebrandt) angeboten zu dem Thema "Modeling Nonlinear Moderation Effects in R: From Multiple Regression to Structural Equation Modeling".

Die DGPs fand dieses Jahr unter erschwerten Bedingungen statt: Aufgrund heftiger Unwetter und damit verbundener Hochwasser konnte ein Großteil der angemeldeten Personen nicht nach Wien reisen. Dank der Flexibilität des Organisationsteams konnte die Veranstaltung allerdings hybrid abgehalten werden. Weitere Informationen zu dem diesjährigen DGPs-Kongress finden Sie hier.

24. September 2024

Die Arbeitseinheit Pädagogische Psychologie mit Schwerpunkt Beratung, Diagnostik und Evaluation heißt Dr. Sarah Bürger als neue Mitarbeiterin willkommen!

16. September 2024

In Kooperation mit Hyo-Jeong Shin, Frederic Robin und Kentaro Yamamoto (Educational Testing Service, Princeton, USA) haben Christoph König und Andreas Frey eine neue Studie veröffentlicht, die das 2018 im Programme for International Student Assessment (PISA) eingeführte Multistage-Adaptive Test-Design für die Domäne Lesen fokussiert. Konkret wurde untersucht, inwieweit das MST-Design robust gegenüber PISA-typischen Charakteristiken ist, die sich negativ auf die Akkuratheit der Schätzung der Itemparameter sowie die Kern-Kenngrößen der PISA-Ranglisten (länderspezifische Mittelwerte und Standardabweichungen) auswirken. Es konnte gezeigt werden, dass selbst hohe Anteile fehlender oder ausgelassener Antworten sowie länderspezifischer Itemparameter die Schätzung der Itemparameter und die länderspezifischen Mittelwerte kaum negativ beeinflussen. Lediglich die Schätzung der länderspezifischen Standardabweichungen wiesen bei hohen Anteilen von fehlenden und ausgelassenen Antworten Verzerrungen auf. Zusammen zeigen diese Ergebnisse, dass das PISA 2018 MST-Design auch in schwierigen Testsituationen einsetzbar ist, und dass es einen richtigen Schritt zu mehr Adaptivität in PISA darstellt. 

Die Studie wurde im „PISA Research, Development and Innovation (RDI) Project on Multistage Adaptive Testing“ der OECD durchgeführt und durch die OECD gefördert.

Die Publikation ist im Journal of Educational Measurement erschienen und per Open Access verfügbar:

Shin, H.J., König, C., Robin, F., Frey, A., & Yamamoto, K. (2024). Robustness of Item Response Theory Models under the PISA Multistage Adaptive Testing Designs. Journal of Educational Measurement. Advance Online Publication. https://doi.org/10.1111/jedm.12409

26. August 2024

Die Arbeitseinheit war mit zwei Beiträgen auf der diesjährigen IMPS-Konferenz, der 89. Jahrestagung der Psychometric Society, vertreten:

• Fink, A.: Addressing Calibration Error in Multidimensional Adaptive Testing: A Bayesian Approach.
• Liu, T., Fink, A., & Epskamp, S.: Integration of Ising Model and Computerized Adaptive Testing: A Simulation

Die Beiträge waren Teil der Sessions "Topics in Adaptive Testing" und "Novel Advances in Psychometric Network Modeling". Die Tagung fand vom 16. bis 19. Juli 2024 in Prag statt. Weitere Informationen zu der Tagung sind hier zu finden. 29. Juli 2024

Die im Februar 2022 von Christoph König und Andreas Frey veröffentlichte Meta-Analyse zu den Auswirkungen coronabedingter Schulschließungen wurde zum zweiten Mal von der Zeitschrift Educational Measurement: Issues and Practice ausgezeichnet. Schon letztes Jahr wurde die Meta-Analyse, die als eine der ersten einen mittleren negativen Effekt auf die Schülerleistung zeigen konnte, der in mehreren Folgestudien bestätigt wurde, als meist-zitierte des Jahres 2022 prämiert. Diese Auszeichnung hat die Meta-Analyse nun auch für das Jahr 2023 erhalten.

Die Publikation ist per Open Access verfügbar:

König, C., & Frey, A. (2022). The Impact of COVID-19-Related School Closures on Student Achievement - A Meta-Analysis. Educational Measurement: Issues and Practice, 41, 16–22. https://doi.org/10.1111/emip.12495

25. Juli 2024

Im Rahmen des HIKOF-DL Projektes wurde ein neuer Artikel in Kooperation mit dem DIPF veröffentlicht. In diesem haben wir die emotionalen und motivationalen Effekte verschiedener Arten von automatisiertem, formativen Feedback in einer computergestützten, kollaborativen Aufgabe unter die Lupe genommen. Informatives Feedback wurde von den Studierenden als hilfreicher eingeschätzt als simples Feedback über das Bestehen der Aufgabe. Der jeweilige Bezugsrahmen des Feedbacks, also ob kriteriumsorientiert (z.B. mit Bezug auf die Lernziele) oder mit Bezug auf die Normgruppe, zeigte differenzierte Effekte. Feedback mit reinen sozialen Vergleichen erwies sich als weitgehend nachteilig, während eine Kombination von sozialem und kriterialem Bezugsrahmen wünschenswerte Effekte auf die Motivation der Studierenden haben kann. Kriteriumsoientiertes Feedback führte zu mehr positiven Emotionen bei Studierenden mit überdurchschnittlicher Leistung und zu mehr negativen Emotionen bei Studierenden mit unterdurchschnittlicher Leistung. 

Weidlich, J., Fink, A., Jivet, I., Giorgashvili, T., Drachsler, H., & Frey, A. (2024). Emotional and motivational effects of automated and personalized formative feedback: The role of reference frames. Journal of Computer Assisted Learning. Advance online publication.  https://doi.org/10.1111/jcal.13024

07. Juni 2024

Unsere Arbeitseinheit war durch einen Beitrag von Aron Fink auf der diesjährigen NCME-Tagung in Philadelphia vertreten.

Fink, A., Gombert, S., Liu, T., & Frey, A., (2024, April). The integration of automated essay scoring models using hierarchical rater models. Paper presented at the Annual Meeting of the National Council on Measurement in Education (NCME), Philadelphia, USA.

Die Tagung fand unter dem Titel "Reconceptualizing Best Practices in Measurement to Reduce Inequities" statt. Weitere Informationen zur Tagung sind hier zu finden.

29. Mai 2024

Die Arbeitseinheit war mit drei Beiträgen auf der elften GEBF-Tagung in Potsdam vertreten:

• König, C., Frey, A., & Goldhammer, F.: Leistungsemotionen im Vergleich zwischen papier- und computerbasierter Testung bei IGLU 2021.
• Frey, A., Liu, T., Fink, A., & König, C.: Metaanalyse zu den Effekten computerisierten adaptiven Testens auf Motivation und Emotion von Testpersonen.
• Schenk, C., Naumann, P., & Frey, A.: Emotionale Effekte verschiedener Item-Review-Verfahren bei adaptiven Hochschulklausuren. 

Die Tagung fand unter dem Motto "Bildung verstehen - Partizipation erreichen - Transfer gestalten" statt. Weitere Informationen zu der Tagung sind hier zu finden.

26. März 2024

ADHS-Diagnose über YouTube und TikTok oder doch lieber eine fachkundige Person fragen?

In dem am 5. Februar 2024 auf Sat.1 ausgestrahlten Videobeitrag "Lilly aus Gießen klärt online über ADHS auf" wird auf die Gefahr einer Selbstdiagnose, hier am Beispiel von ADHS, eingegangen. Für den Videobeitrag wurde Thomas Dreisörner interviewt. Als Fachperson rät er davon ab, soziale Medien wie YouTube oder TikTok zur Selbstdiagnose zu nutzen. "Wenn mein Auto nicht richtig funktioniert, schaue ich mir für die Fehlerdiganose ja auch keine TikToks an, sondern gehe zu einem KFZ-Mechaniker."

Der Videobeitrag ist unter folgendem Link zu finden: https://www.1730live.de/lilly-aus-giessen-klaert-online-ueber-adhs-auf/

06. Februar 2024

Im Rahmen des HIKOF-DL Projektes wurde ein neuer Artikel in Kooperation mit dem DIPF veröffentlicht. Im Artikel wird eine Fallstudie vorgestellt, bei der wir eine Pipeline zur automatisierten Auswertung von Essays mittels Natural Language Processing implementiert haben, um so Studierenden automatisiertes, hoch-informatives Feedback auf den Inhalt ihrer Essays geben zu können.  Als Trainingsdaten wurden 689 manuell kodierte Aufsätze genutzt.

Es wurden verschiedene Modelle zur automatisierten Auswertung trainiert (GBERT, T5 und Bag-of-Words-Baseline Modelle). Insbesondere die transformerbasierten Modelle zeigten eine hohe Leistung. Schließlich wurde das auf GBERT basierende Modell für die automatisierte Auswertung der Essays genutzt, um darauf aufbauend das automatisierte Feedback abzuleiten.

Gombert, S., Fink, A., Giorgashvili, T. et al. (2024). From the automated assessment of student essay content to highly informative feedback: A case study. International Journal of Artificial Intelligence in Education. https://doi.org/10.1007/s40593-023-00387-6

29. Januar 2024

Mit dem von Andreas Frey, Christoph König und Aron Fink verfassten Artikel wird ein neues Testdesign vorgeschlagen, das im Gegensatz zu dem zurzeit bei PISA genutzten Testdesign deutlich adaptiver ist. Die Ergebnisse einer ebenfalls im Artikel dargestellten Simulationsstudie zeigen, dass mit dem neuen Design im Vergleich zum PISA-2018-Design inhaltliche Restriktionen (wie geforderte Anteile bestimmter Itemgruppen) besser eingehalten werden und eine deutlich höhere Präzision der Kompetenzmessung erreicht wird. Die Studie ist ein gutes Beispiel dafür, wie Erkenntnisse der psychometrischen Grundlagenforschung zur Weiterentwicklung gesellschaftlich relevanter und öffentlich beachteter Studien genutzt werden können.

Wir hoffen, dass das neue Design bei der methodischen Weiterentwicklung von PISA Berücksichtigung finden wird.

Die Studie wurde im „PISA Research, Development and Innovation (RDI) project on Multistage Adaptive Testing“ der OECD durchgeführt und durch die OECD gefördert.

Es handelt sich um die folgende Arbeit; sie ist per Open Access abrufbar:

Frey, A., König, C., & Fink, A. (2023). A highly adaptive testing design for PISA. Journal of Educational Measurement. Advance online publication. https://doi.org/10.1111/jedm.12382 

21. Dezember 2023

Dieses Jahr haben wir unseren Jahresabschluss im Headquarter gefeiert, was sich als logistisch klug erwies, weil am Abend der Lokführerstreik begann. Leider rissen die Lokführer auch unsere beiden MCs Anelia Vanova und Nariman Utegaliyev vor dem Ende der Feier von uns. Nichtsdestotrotz genossen wir die weihnachtlichen Leckereien, die kitschige Weihnachtsmusik und das obligate Schrottwichteln alle zusammen. Es wechselten wieder äußerst formschöne, rätselhafte und schaurige Geschenke mehrfach ihre Besitzer. Der Chef verteilte den Arbeitsbericht 2023 und blickte mit uns auf ein erfolgreiches und  gelungenes Jahr zurück. Wir empfingen seinen Dank und seine Wertschätzung auch jeweils einzeln. Danach stürzten wir uns auf das Buffet und eines der Exitspiele, das unsere Denkfabrik zum Qualmen brachte. Wir befreiten uns aus der gefahrvollen Station im ewigen Eis und waren sehr albern dabei. 

Die gesamte Abteilung hofft, dass mit diesem positiven Abschluss ein gutes Jahr für uns alle eingeläutet wird und wünschen unseren Besuchern dieser Seite fröhliche Weihnachtstage und ein glückliches und erfolgreiches neues Jahr!

Unser diesjähriges Retreat fand diesmal über zwei Tage im wunderschönen Spessart im Grünen statt, und zwar in einem abgelegenen Gasthof mit regionaler Vollversorgung. Hier konnten wir in aller Ruhe zurück- und vorausblicken, Ziele festlegen, die Abteilungsstruktur überarbeiten und optimieren und mit sehr kurzweiligen und effektiven Aufgabenstellungen die mittel- und langfristigen Vorhaben für unsere Professur herausarbeiten. Darüber hinaus war unser Aufenthalt von haltloser Völlerei bestimmt, der wir auch mit einer zweistündigen Wanderung nicht Herr werden konnten. Wir verließen den wunderbaren Ort mit neuen Aufgaben in unseren Taschen und einem gestärkten Gemeinschaftsgefühl.

19. Oktober 2023

Unsere Arbeitseinheit wurde durch einen Beitrag von Tuo Liu auf der 17. Tagung der DGPS-Fachgruppe Differentielle Psychologie, Persönlichkeitspsychologie und Psychologische Diagnostik (DPPD) in Salzburg, Österreich repräsentiert.

Liu, T., Molenaar, D., & Hildebrandt, A. (2023, September). Verbesserung der Präzision bei der Emotionsidentifikationsaufgabe: Ein Vergleich der Antwortzeiten bei Tastaturantworten und Mouse-Tracking-Metriken in einer gemeinsamen Modellanalyse. Vortrag präsentiert auf der 17. Arbeitstagung der Fachgruppe Differentielle Psychologie, Persönlichkeitspsychologie und Psychologische Diagnostik [17th Working Meeting of the Division of Differential Psychology, Personality Psychology, and Psychological Assessment] (DPPD), Universität Salzburg [University of Salzburg].

Weitere Informationen zur Tagung finden Sie hier.

04. Oktober 2023

Im Rahmen des HIKOF-Projektes wurde ein Artikel in den Proceedings der diesjährigen EC-TEL Konferenz veröffentlicht.

Der Artikel stellt einen automatisierten Ansatz zur Bereitstellung hochinformativen Feedbacks zu Prozessen, die in CSCL-Forumsdiskussionen involviert sind, vor. Unser Hauptaugenmerk lag dabei auf der Bewertung der Gruppenkommunikationsfähigkeiten der einzelnen Studierenden. Dieses Feedback wird systematisch durch die Analyse verschiedener Diskursindikatoren generiert, welche genutzt werden, um verschiedene Rollen im Diskurs zu identifizieren, die die Studierenden innerhalb ihrer Gruppen einnehmen. Daraus leiten wir Feedback ab, das sowohl ihre Stärken als auch Bereiche mit Verbesserungspotenzial aufzeigt.

Menzel, L., Gombert, S., Weidlich, J., Fink, A., Frey, A., Drachsler, H. (2023). Why You Should Give Your Students Automatic Process Feedback on Their Collaboration: Evidence from a Randomized Experiment. In: Viberg, O., Jivet, I., Muñoz-Merino, P., Perifanou, M., Papathoma, T. (eds) Responsive and Sustainable Educational Futures. EC-TEL 2023. Lecture Notes in Computer Science, vol 14200. Springer, Cham. https://doi.org/10.1007/978-3-031-42682-7_14

28. September 2023

Unsere Arbeitseinheit war durch einen Beitrag von Aron Fink auf der diesjährigen FREMO-Konferenz in OSLO vertreten:

Fink, A. Gombert, S., & Frey, A.: Using Natural Language Processing to Automate the Assessment of Student Essay Content

Weitere Informationen zur Tagung sind hier zu finden.

28. September 2023 

Die Arbeitseinheit war mit zwei Vorträgen auf der 19. Tagung der DGPs-Fachgruppe Pädagogische Psychologie in Kiel vertreten:

• Frey, A., König, C., & Goldhammer, F.: Leistungsemotionen im Vergleich zwischen papier- und computerbasierter Testung bei IGLU 2021.
• Hahnel, C. Kröhne, U., Frey, A., Ludewig, U., & Goldhammer, F.: Unterscheidet sich die mentale Fokussiertheit beim Lesen am Computer vom Lesen auf Papier? Eine Ergänzungsstudie zu IGLU 2021.

Weitere Informationen inkl. dem Tagungsprogramm sind hier zu finden.

22. September 2023 

Die Arbeitseinheit war mit vier Vorträgen und einem Poster in sehr gut sichtbarer Weise auf der 16. Tagung der DGPs-Fachgruppe Methoden und Evaluation in Konstanz vertreten:

• Fink, A. Gombert, S., & Frey, A.: Automatisierte Inhaltsanalyse von Essays mittels Transformern [Automated essay scoring using transformers]
• Frey, A., Fink, A., König, C., & Liu, T.: Metaanalyse zu den Effekten des computerisierten adaptiven Testens auf Motivation und Emotion [Meta-analysis on the effects of computerized adaptive testing on motivation and emotion]
• König, C., Fink, A., & Frey, A.: Der Einfluss hoch-adaptiven Testens auf den Ländervergleich bei PISA [The effect of highly adaptive testing on the international comparison in PISA.]
• Liu, T. & Epskamp, S.: Adaptive Form of Network Psychometrics: a simulation study.
• Ranger, J., Koenig, C., Domingue, B., Kuhn, J. T. & Frey, A.: A Multidimensional Partially-Compensatory Response Time Model on Basis of the Log-Normal Distribution.

Sowohl das inhaltliche als auch das Rahmenprogramm waren – wie eigentlich immer bei dieser Tagung – mal wieder hervorragend. Vielen Dank an die Ausrichter!

Weitere Informationen zu der Tagung inkl. dem Tagungsprogramm sind hier zu finden.

22. September 2023

Im Rahmen des Projekts "DigiTeLL" wurden von Andreas Frey und Cosima Schenk Informationsmaterialien zum Thema "Kompetenzorientiertes Prüfen" erstellt, welche einen Überblick über die Konzeption von kompetenzorientierten Prüfungen geben und die Konstruktion von Multiple Choice Items - insbesondere zu der Abfrage von höheren kognitiven Prozessen - erläutern.

Die Materialien können über die folgenden Links eingesehen und heruntergeladen werden:

• Kompetenzorientiertes Prüfen im Projekt DigiTeLL
• Empfehlungen zur Konstruktion von Multiple-Choice-Testaufgaben für höhere kognitive Prozesse

21. September 2023

Andreas Frey hat auf der earli 2023 die vier Einzelbeiträge des Symposiums „Effects of the COVID-19 pandemic on student achievement” (Chair: Natalie Foerster, Westfälische Wilhelms-Universität Münster) als eingeladener Diskutant besprochen (als Videoeinspielung).

29. August 2023 

Die Arbeitseinheit Pädagogische Psychologie mit Schwerpunkt Beratung, Diagnostik und Evaluation heißt Nariman Utegaliyev als neuen Mitarbeiter willkommen!

1. August 2023

Vom 11. bis zum 13. Juli 2023 fand der 10. Europäische Kongress für Methodologie (EAM 2023) an der Universität Gent in Belgien statt. Die Arbeitseinheit Pädagogische Psychologie mit Schwerpunkt Beratung, Diagnostik und Evaluation war mit drei Beiträgen auf dem Kongress vertreten.

Prof. Dr. Andreas Frey hielt einen Vortrag mit dem Titel „A Highly Adaptive Testing Design for PISA“. Dr. Christoph König hielt einen Vortrag mit dem Titel „A Similarity-Weighted Informative Prior Distribution for Bayesian Multiple Regression Models“. Tuo Liu präsentierte ein Poster mit dem Titel „Enhancing Predictive Cut Scores in Higher Education Enrollment with Explainable Machine Learning Algorithms“.

Am 16. Mai 2021 wurden die Ergebnisse der IGLU 2021-Studie vorgestellt. Die Pressekonferenz kann hier eingesehen werden. Die Ergebnisse wurden im Nachgang als „alarmierend“ beschrieben.

Es zeigte sich unter anderem, dass ein Viertel der Viertklässlerinnen und Viertklässler in Deutschland nicht den international festgelegten Standard für eine Lesekompetenz erreicht, die für einen erfolgreichen Übergang vom „Lesen lernen“ zum „Lesen um zu Lernen“ notwendig ist. Diese Kinder werden aufgrund ihrer schwachen Lesekompetenz in ihrer weiteren Schullaufbahn erhebliche Probleme in allen Fächern haben, insofern sie den Rückstand nicht aufholen können. Deutschland gehört zusammen mit Schweden und den Niederlanden zu einer kleinen Gruppe von drei Teilnehmerstaaten mit problematischer Entwicklung der Lesekompetenz in den letzten 20 Jahren. Diese ist gekennzeichnet durch einen signifikanten Rückgang der mittleren Lesekompetenz bei einem Anstieg der Streuung.

Die Ergebnisse wurden umfangreich in der Presse und im Nachgang in den Ländern Deutschlands diskutiert. Wir freuen uns, dass wir an dieser gesellschaftlich wichtigen Studie partizipieren konnten. Der nationale Berichtsband mit differenzierten Ergebnissen für Deutschland kann hier mit Open Access heruntergeladen werden.

13. Juni 2023

Wir suchen ab sofort vier studentische Hilfskräfte (m/w/d) für 60h/Monat zur Unterstützung bei organisatorischen Aufgaben in der Umsetzung lernbezogener Beratung von Schüler*innen an Schulen in Frankfurt und Umgebung im Rahmen des Projekts CoBi.

Das Aufgabengebiet umfasst die Unterstützung bei der Kommunikation mit studentischen Berater*innen und Ansprechpersonen an Schulen sowie organisatorische und administrative Tätigkeiten. 

Die ausführliche Stellenausschreibung befindet sich hier. 

07. Juni 2023

Wir suchen ab September 2023 studentische Honorarkräfte (m/w/d) für die lernbezogene Beratung von Schüler*innen im Rahmen des Projekts CoBi.

Das Aufgabengebiet umfasst die Unterstützung von Schüler*innen der 8. bis 13. Klasse an Schulen in Frankfurt und Umgebung mittels lernbezogener Beratung. Die Beratung umfasst insgesamt fünf Termine, darunter ein Erstgespräch und vier Beratungstermine. Die Beratungen werden nachmittags an den Schulen durchgeführt.

Die ausführliche Stellenausschreibung befindet sich hier. 

07. Juni 2023

In unserer Arbeitseinheit ist zum nächstmöglichen Zeitpunkt die Stelle für eine*n Wissenschaftliche*n Mitarbeiter*in (m/w/d)

 E13 TV-G-U, 75%-Teilzeit

zunächst befristet für die Dauer von zwei Jahren zu besetzen.

Das Aufgabengebiet umfasst schwerpunktmäßig die Vorbereitung und Durchführung von pädagogisch-psychologischen Lehrveranstaltungen (6 LVS). Die Stelle ist für Promovierte und nicht Promovierte geeignet. Die Weiterqualifikation in Form einer Dissertation/Habilitation ist möglich und erwünscht.

Die ausführliche Stellenbeschreibung befindet sich hier. Bewerbungen mit den üblichen Unterlagen sind bis zum 30.04.2023 an Prof. Dr. Andreas Frey zu senden.

Vom 5.3.-10.3.2023 wurde erneut das jährliche Kolloquium „Methoden der empirischen Bildungsforschung in Hirschegg in Österreich veranstaltet. Im Rahmen des Kolloquiums wurden Beiträge zu aktuellen methodischen Entwicklungen im Bereich der Bildungsforschung von 15 Expertinnen und Experten diskutiert. Neben den wissenschaftlich anregenden Beiträgen gab es dieses Jahr auch einen Geburtstag zu feiern.

Seitens der Arbeitseinheit wurden Vorträge gehalten von

• Prof. Dr. Andreas Frey zu Differential Item Functioning bei adaptiven Tests
• Dr. Aron Fink zur Nutzung von Natural Language Processing zu automatisieren Auswertung von Essays im Hochschulbereich

Wir schauen erneut auf eine sehr anregende Zeit im Kleinwalsertal zurück und bedanken uns bei allen Teilnehmenden!

12. April 2023

Prof. Dr. Andreas Frey hat einen Artikel zu Computerized Adaptive Testing (CAT) und Multistage Testing (MST) in der International Encyclopedia of Education veröffentlicht.

Dieser Artikel gibt einen Überblick über die grundlegenden Konzepte von CAT und MST. Es werden die Methoden beschrieben, die im Rahmen der sechs Bausteine zur Konzeption eines modernen CAT-Systems zur Anwendung kommen. Anschließend wird der aktuelle Wissensstand über die Auswirkungen von CAT auf (a) die Messeffizienz, (b) die Validität der Interpretation von Testergebnissen und (c) die Testmotivation zusammengefasst. Daraus wird gefolgert, dass CAT als Kernelement in dynamischen Prüfsystemen mit Echtzeit-Optimierungsverfahren bei zukünftigen Bewertungen eine weiter wachsende Rolle spielen dürfte.

Die Publikation ist hier verfügbar:

Frey, A. (2023). Computerized adaptive testing and multistage testing. In R. J. Tierney, F. Rizvi & K. Erkican (Eds.), International Encyclopedia of Education (4th ed., pp. 209–216). Elsevier. https://doi.org/10.1016/B978-0-12-818630-5.10028-4

27. März 2023

Dr. Christoph König hat, zusammen mit Benjamin Becker (IQB Berlin) und Dr. Esther Ulitzsch (IPN Kiel) ein Tutorial zur Bayesianischen hierarchischen Modellierung von Response Time (RT) Modellen veröffentlicht. In diesem leicht zugänglichen Tutorial diskutieren die Autoren zunächst eines der bekanntesten RT Modellen – das lognormale RT Modell – und dessen Einbettung in das hierarchische Modell nach van der Linden (2007). Sie zeigen detailliert, wie dieses Modell in einem hierarchischen Bayesianischen Kontext spezifiziert und geschätzt werden kann. Zudem werden drei Modellerweiterungen illustriert: a) die Anwendung von RT Modellen auf nicht-kognitive Daten, b) die Modellierung bedingter Abhängigkeiten zwischen Antwortzeiten und Antworten, und c) die Identifikation von Unterschieden im Antwortverhalten im Kontext von Mixture Modellen. Das Tutorial zielt darauf ab, ein besseres Verständnis für die Nutzung und den Nutzen von RT Modellen zu vermitteln und zeigt auf, wie diese Modelle adaptiert und erweitert werden können.

Die Publikation ist im British Journal of Mathematical and Statistical Psychology erschienen und per Open Access verfügbar:

König, C., Becker, B., & Ulitzsch, E. (2023). Bayesian hierarchical response time modelling—A tutorial. British Journal of Mathematical and Statistical Psychology. Advance online publication. https://doi.org/10.1111/bmsp.12302

21. März 2023

Im Februar 2022 konnten Dr. Christoph König und Prof. Dr. Andreas Frey in einer der ersten Meta-Analysen zu den Auswirkungen coronabedingter Schulschließungen in den Jahren 2020 und 2021 zeigen, dass sich diese mit einem mittleren Effekt von -0.17 negativ auf die Leistung von Schülerinnen und Schülern an allgemeinbildenden Schulen ausgewirkt haben. Dieser negative Effekt wurde in mehreren Folgestudien bestätigt. Die Meta-Analyse wurde nun von der Zeitschrift Educational Measurement: Issues and Practice als meist-zitierte Studie des Jahres 2022 ausgezeichnet.

Die Publikation ist per Open Access verfügbar:

König, C., & Frey, A. (2022). The Impact of COVID-19-Related School Closures on Student Achievement—A Meta-Analysis. Educational Measurement: Issues and Practice, 41, 16–22. https://doi.org/10.1111/emip.12495

21. März 2023

Aron Fink hat seine Doktorarbeit mit dem Titel "Herausforderungen bei der Implementation kriteriumsorientierter adaptiver Hochschulklausuren" im Rahmen einer öffentlichen Disputation am 18.01.2023 verteidigt.

Wir gratulieren Aron herzlich zum hervorragend gemeisterten vorletzten Schritt auf dem Weg zur Promotion!

18. Januar 2023

Das ereignisreiche und erfolgreiche Jahr 2022 haben wir auf dem Dach des „Skyline Plaza“ beim Eisstockschießen abgeschlossen und danach in der warmen Stube im Gasthaus „Zur Sonne“ gefeiert. Beim Eisstockschießen entfesselten einige von uns ungeahnte Kräfte, natürlich die, von denen wir es nicht gedacht hatten. Es krachte und polterte und nur mit Glück blieb die Bude heil. Im Anschluss machten wir es uns im rustikalen Gasthaus gemütlich und schrottwichtelten was das Zeug hielt. Am Ende hatte jeder ein herrlich unnützes Geschenk und womöglich einen im Tee. Der Chef hielt einen Rückblick auf das zurückliegende gute Jahr und sprach jedem einzelnen von uns mit seinen Beiträgen dazu seinen Dank aus. Besonders die gelungene internationale Tagung der IACAT-Association wurde uns wieder in Erinnerung gerufen. Es war ein toller Abend und wir hatten jede Menge Spaß.

Die gesamte Abteilung hofft, dass mit diesem positiven Abschluss ein gutes Jahr für uns alle eingeläutet wird und wünscht unseren Besuchern dieser Seite fröhliche Weihnachtstage und ein glückliches und erfolgreiches neues Jahr!

Januar 2023

Die Arbeitseinheit Pädagogische Psychologie mit Schwerpunkt Beratung, Diagnostik und Evaluation heißt Anelia Vanova als neue Mitarbeiterin willkommen!

1. Dezember 2022

Im Rahmen von AKGU werden kompetenzorientiere adaptive Klausuren für die GU erschlossen. Dafür wird die an der GU entwickelte KAT-HS-App zur Konstruktion, Administration und Auswertung adaptiver E-Klausuren weiterentwickelt, anhand einer Modulklausur erprobt und evaluiert und schließlich in der Breite nutzbar gemacht.

Videoproduktion: Lara Weiß

Sprecherin: Sophie Ament

22. November 2022

Die Arbeitseinheit Pädagogische Psychologie mit Schwerpunkt Beratung, Diagnostik und Evaluation heißt Dr. Päivi Hannele Taskinen, Cosima Schenk & Lara Weiß als neue Mitarbeiterinnen willkommen!

09. November 2022

Aron Fink und Prof. Dr. Andreas Frey haben zusammen mit Prof. Dr. Christian Spoden eine neue Publikation zum Thema „Einflussfaktoren auf die Intention zur Nutzung von technologiegestützten Klausuren seitens Hochschullehrender“ veröffentlicht.

In diesem Beitrag wird das „Technology-based Exams Acceptance Model“ (TEAM) vorgeschlagen und seine Modellstruktur aus der Perspektive von Hochschullehrenden empirisch geprüft. Mit TEAM steht nun ein hochprädiktives Modell zur Erklärung der Intention zur Nutzung von E-Klausuren zur Verfügung. Es bietet eine empirisch geprüfte, theoretische Grundlage, die für die erfolgreiche Einführung von E-Prüfungen in der Hochschulbildung genutzt werden kann.

Die Publikation ist in der Zeitschrift Education and Information Technologies erschienen und per Open Access verfügbar:
Fink, A., Spoden, C., & Frey, A. (2022). Determinants of higher education teachers’ intention to use technology-based exams. Education and Information Technologies. Advance online publication. https://doi.org/10.1007/s10639-022-11435-4  

22. November 2022

Dr. Christoph König und Prof. Dr. Andreas Frey haben, zusammen mit Dr. Christian Spoden, haben eine neue Publikation zum Thema Bayesianische hierarchische Modellierung von Item Response Theory (IRT) Modellen veröffentlicht. In einer umfangreichen Simulationsstudie wurde die Sensitivität der Performanz eines vorher optimierten Bayesianischen hierarchischen 2PL-IRT Modells untersucht und mit einer Reihe von alternativen Schätzmethoden und –ansätzen verglichen. Es konnte gezeigt werden, dass das optimierte Modell eine relativ robuste Performanz aufweist, insbesondere in kleinen Stichproben. Die Simulationsstudie leistet daher einen Beitrag zur Erweiterung des Anwendungskontextes von IRT-Modellen auf u.a. Universitätskontexte, da hier oftmals mit kleinen Stichproben und suboptimalen Testbedingungen gearbeitet werden muss.

Die Publikation ist in der Zeitschrift Behavior Research Methods erschienen und per Open Access verfügbar:
König, C., Spoden, C., & Frey, A. (2022). Robustness of the performance of the optimized hierarchical two-parameter logistic IRT model for small-sample item calibration. Behavior Research Methods. Advance online publication. https://doi.org/10.3758/s13428-022-02000-5

10. November 2022

Die Beisheim-Stiftung fördert das Projekt „Coronabedingte Bildungsbenachteiligungen erkennen und verringern - Online“ (CoBi-Online) der Goethe-Universität Frankfurt (Leitung Prof. Dr. Andreas Frey) für zwei Jahre (2022-2024). CoBi-Online ist das dritte Teilprojekt der CoBi-Projektfamilie (neben CoBi und CoBi-Transfer). Mit CoBi-Online wird das im CoBi-Projekt entwickelte Lern-Unterstützungssystem dahingehend weiterentwickelt, dass es auch in einem videogestützten Online-Kontext eingesetzt und über Hessen hinaus angeboten werden kann. Somit leistet CoBi-Online einen weiteren wichtigen Beitrag zur Abfederung der durch die Corona-Pandemie entstandenen Bildungsbenachteiligungen. 

01. November 2022

Das Projekt „Coronabedingte Bildungsbenachteiligungen erkennen und verringern - Transfer“ (CoBi-Transfer) der Goethe-Universität Frankfurt (Leitung Prof. Dr. Andreas Frey) wird vom Hessischen Kultusministerium im Rahmen des Löwenstark-Programms im Schuljahr 2022/2023 gefördert. Mit dem Projekt wird das im Vorläuferprojekt CoBi entwickelte Lern-Unterstützungssystem direkt an allgemeinbildende Schulen im Frankfurter Raum und darüber hinaus gebracht. Damit kann das CoBi-Unterstützungssystem weiterentwickelt und einem breiteren Kreis von Schülerinnen und Schülern angeboten werden. CoBi-Transfer leistet so einen Beitrag zur Abfederung der durch die Corona-Pandemie entstandenen Bildungsbenachteiligungen. 

15. Oktober 2022

Vom 20. bis zum 22. September 2022 war die Goethe-Universität Frankfurt der Gastgeber der 8. Conference of the International Association for Computerized Adaptive Testing. Die drei Konferenztage waren gespickt mit sehr interessanten Vorträgen über Möglichkeiten, wie man Assessments mit computerbasiertem adaptiven Testen in einem digitalen Zeitalter verbessern kann. Wir konnten über 150 Expertinnen und Experten aus 29 Ländern begrüßen, die die Tagung zu einer herausragenden Möglichkeit zum Austausch gemacht haben. Von daher kann man mit Fug und Recht behaupten, dass die IACAT 2022 ein voller Erfolg war! Wir sehen uns auf der nächsten IACAT Tagung im Jahr 2024!

1. Oktober 2022

Am 15.9.2022 ist die 6., überarbeitete Auflage des Lehrbuchs „Psychologie“ (Schütz, Brand & Steins-Loeber, 2022) erschienen. Dieses enthält das Kapitel „Empirische Forschungsmethoden“ von Prof. Dr. Martin Schultze und Prof. Dr. Andreas Frey. Das Kapitel gibt einen Überblick über die für die Psychologie relevanten Forschungsmethoden und ist auch der konzeptuelle Rahmen der Doppelvorlesung PsyBSc1 „Einführung in die Psychologie als empirische Wissenschaft I und II“ im Rahmen unseres Bachelor-Studiengangs Psychologie.

Die überarbeitete Auflage des Lehrbuches ist hier verfügbar.

20. September 2022

Den Artikel finden Sie hier.

19. September 2022

Vom 10. Bis zum 15. September 2022 fand der 52. Kongress der Deutschen Gesellschaft für Psychologie (DGPs) an der Universität Hildesheim statt. Die Arbeitseinheit war mit zahlreichen Beiträgen vertreten.

Prof. Dr. Andreas Frey hielt einen Vortrag mit dem Titel Hoch-adaptives Testen bei PISA (Frey, König & Fink). Aron Fink hielt einem Vortrag zum Thema „Nutzung von Natural Language Processing zur automatisierten Kodierung von Essays in digital gestützten Großveranstaltungen an Hochschulen“ (Fink, Frey, Liu & Gombert). Zudem präsentierte er die KAT-HS-App im Rahmen einer 90-minütigen Softwaredemonstration (Fink, Spoden, Frey & Naumann). Auch Dr. Christoph König hielt einen Vortrag. Dieser trug den Titel „The Impact of COVID-19-Related School closures on Student Achievement – A Meta-Analysis” (König & Frey). Zudem präsentierte Tuo Liu einen Beitrag mit dem Titel “To see or not to see: Self-association doas not facilitate the perception of facial expressions” (Liu & Hildebrandt) sowie eine Softwaredemonstration zum “Open Virtual Mirror Framework” (Grewe, Liu, Hildebrandt & Zachow).

19. September 2022

Liebe Studierende,

wir suchen zum nächstmöglichen Zeitpunkt Studierende (m/w/d) für die lernbezogene Beratung von Schüler*innen an Schulen in Frankfurt und Umgebung. Es besteht zudem die Möglichkeit, das Pflichtpraktikum im Bachelor oder Master Psychologie bei uns im Projekt CoBi+ zu absolvieren. Die ausführliche Stellenbeschreibung befindet sich hier. Wir freuen uns auf Eure Bewerbung. Sendet diese bitte an Diana Dusny.

19. September 2022

Der Semesterabschluss war heiß, 35 Grad. Diesmal wieder unerschrocken unterwegs, doch ohne übergewichtigen Hund: das Team Frey. Start am Goethe-Haus, dann am Mainufer entlang, in den kühlen Stadtwald hinein, am Goetheturm ein kaltes Getränk zischen, vorzugsweise hessisch, um dann in den aufkommenden Abend durch Sachsenhausen bis zum Ristorante mit Hofgarten zu wandern. Dort Erholung, wohlwollender Rückblick auf Forschung, Projekte und Lehre im Sommersemester und Stärkung mit feinen Leckereien. Zufrieden langsam ausdampfend gaben wir uns Entspannung und Blödeleien hin. Energie und Zuversicht für neue Aufgaben!

20. Juli 2022

Das HIKOF-DL Projekt hat zum Ziel, Hochschulen und Firmen dabei zu unterstützen, das Potential der durch die COVID-19-Pandemie rasant gewachsenen Datenbestände der Online-Lehre mittels Künstlicher Intelligenz (KI) zu analysieren und in hochinformatives und kompetenzorientiertes Feedback für Studierende umzuwandeln.

Das Projekt wird in Kooperation mit dem Leibniz-Institut für Bildungsforschung und Bildungsinformation sowie „studiumdigitale“, der zentralen E-Learning-Einrichtung der Goethe-Universitä, durchgeführt. Gefördert wird das Projekt aus Mitteln des Distr@l-Förderprogramms der hessischen Landesregierung.

22. Juni 2022

Dr. Ulrich Ludewig, Ruben Kleinkorres, Dr. Rahim Schaufelberger, Theresa Schlitter, Dr. Ramona Lorenz, Dr. Christoph König, Prof. Dr. Andreas Frey und Prof'in. Dr. Nele McElvany haben eine Publikation zum Stand der Lesekompetenz nach den bisherigen coronabedingten Einschränkungen in der Schule veröffentlicht. Hierbei wurden 4.290 Viertklässler*innen aus 111 Schulen in Deutschland untersucht. Der beobachtete signifikante Rückgang der Lesekompetenz von 2016 bis 2021 kann nur teilweise durch die veränderte Zusammensetzung der Schülerschaft erklärt werden. Der Rückgang geht weit über für Large-Scale-Assessments typische Veränderungen der durchschnittlichen Lesekompetenz innerhalb von fünf Jahren hinaus. Es ist daher wahrscheinlich, dass er zumindest teilweise mit COVID-19-bezogene Maßnahmen im Zusammenhang steht.

Die Publikation ist in der Zeitschrift Frontiers in Psychology erschienen und per Open Access verfügbar: Ludewig, U., Kleinkorres, R., Schaufelberger, R., Schlitter, T., Lorenz, R., Koenig, C., Frey, A., & McElvany, N. (2022). COVID-19 pandemic and student reading achievement – Findings from a school panel study. Frontiers in Psychology, 13. 1–15. https://doi.org/10.3389/fpsyg.2022.876485 

08. Juni 2022

In unserer Arbeitseinheit ist – in Kooperation mit dem TransMIT-Zentrum für wissenschaftlich-psychologische Dienstleistungen (DGPs) – zum nächstmöglichen Zeitpunkt die Stelle für eine*n Wissenschaftliche*n Mitarbeiter*in (m/w/d) (E13 TV-G-U) zu besetzen.

Die Stelle umfasst Aufgaben in Forschung und Lehre im Bereich pädagogisch-psychologische Diagnostik sowie die Arbeit im Projekt GTP+ (Goethe-Test Pro Weiterentwicklung). Im Projekt GTP+ wird in Kooperation mit dem Goethe-Institut der weltweit eingesetzte, computer-adaptive Sprachtest Goethe-Test-Pro weiterentwickelt.

Die Arbeit an einer Qualifikationsarbeit (Dissertation, Habilitation) ist möglich und erwünscht.

Die ausführliche Stellenbeschreibung befindet sich hier. Bewerbungen mit den üblichen Unterlagen sind bis zum 22.06.2022 (Fristverlängerung) an Prof. Dr. Andreas Frey zu senden.

08. Juni 2022

Die Arbeitseinheit Pädagogische Psychologie mit Schwerpunkt Beratung, Diagnostik und Evaluation heißt heute Tuo Liu als neuen Mitarbeiter willkommen!

01. Juni 2022

Zusammen mit Prof. Dr. Gerhard Büttner und Prof. Dr. Sebastian Poloczek hat Dr. Svenja Hammerstein einen Artikel zur Nutzung der gemischten Rundungsstrategie beim Überschlagsrechnen im Grundschulalter veröffentlicht. Poloczek, S., Hammerstein, S., & Büttner, G. (2022). Children’s Mixed-Rounding Strategy Use in Computational Estimation. Journal of Numerical Cognition, 8(1), 24-35. https://doi.org/10.5964/jnc.7299 Verfügbar unter: https://jnc.psychopen.eu/index.php/jnc/article/view/7299/ 7299.html

5. Mai 2022

Kürzlich ist das Kapitel „Kompetenzdiagnostik“ in der zweiten Auflage des Handbuchs Schulpädagogik erschienen. In diesem beschreiben Prof. Dr. Andreas Frey und Prof. Dr. Johannes Hartig um was es sich bei Kompetenztests handelt und welche Ziele mit ihnen verfolgt werden sowie die Grundsätze ihrer Konstruktion, Auswertung und Testwertinterpretation.

Das Handbuch Schulpädagogik ist hier verfügbar:
Harring, M., Rohlfs, C., & Gläser-Zikuda, M. (2022). Handbuch Schulpädagogik (2nd ed.). Waxmann. 

Das Kapitel Kompetenzdiagnostik ist hier verfügbar:
Frey, A., & Hartig, J. (2022). Kompetenzdiagnostik. In M. Harring, C. Rohlfs, & M. Gläser-Zikuda (2nd ed.). Handbuch Schulpädagogik (pp. 928–937). Waxmann.

26. April 2022

Das ehemalige Mitglied unserer Arbeitsgruppe (noch zu Jenaer Zeiten) Christian Spoden, wurde kürzlich zum Professor für „Psychologie mit dem Schwerpunkt Allgemeine Psychologie, Methodenlehre und Differenzielle Psychologie“ an die Hochschule Emden/Leer berufen (https://www.hs-emden-leer.de). Wir freuen uns sehr mit Christian und wünschen viel Erfolg an der neuen Wirkungsstätte!

19. April 2022

In unserer Arbeitseinheit ist zum nächstmöglichen Zeitpunkt die Stelle für eine*n Projektmitarbeiter*in (m/w/d) (E13 TV-G-U, halbtags) befristet für die Dauer von einem Jahr zu besetzen.

Die Stelle ist im Partnership-Projekt „Adaptive Klausuren für die GoetheUniversität“ (AKGU) verortet, welches im Rahmen des „Digital Teaching and Learning Labs“ (DigiTeLL) der Goethe-Universität gefördert wird. AKGU sieht vor, Klausuren durch eine konsequente Kompetenzorientierung in Kombination mit einer computerbasierten adaptiven Aufgabenauswahl individualisierter, messpräzisier und fairer zu machen. Schließlich soll das Konzept adaptiver E-Klausuren anhand einer Klausur zu psychologischen Forschungsmethoden erprobt, evaluiert und schließlich in der Breite nutzbar gemacht werden.

Die ausführliche Stellenbeschreibung befindet sich hier. Bewerbungen mit den üblichen Unterlagen sind bis zum 01.05.2022 an Aron Fink zu senden.

13. April 2022

Prof. Dr. Andreas Frey, Aron Fink und Patrick Naumann haben gemeinsam mit Prof. Dr. Christian Spoden und Hanna Köhler einen Artikel in der Zeitschrift für Hochschulentwicklung veröffentlicht. Im Artikel wird ausgeführt, inwiefern kompetenzorientierte adaptive E-Klausuren die Vergleichbarkeit und Fairness von Prüfungsleistungen verbessern können. Es wird überdies eine Anwendung dargestellt, aus der sich Empfehlungen zur Umsetzung im regulären Klausurbetrieb ableiten lassen. Abschließend werden Erweiterungen und Herausforderungen adaptiver und individuell zugeschnittener E-Klausuren diskutiert.

Der Artikel ist hier verfügbar:

Spoden, C., Fink, A., Frey, A., Köhler, H., & Naumann, P. (2022). Kompetenzorientierung und Fairness bei individualisierten E-Klausuren. Zeitschrift für Hochschulentwicklung, 17(1), 121–140. Verfügbar unter: https://zfhe.at/index.php/zfhe/article/view/1588

7. April 2022

Zusammen mit Prof. Christian Spoden haben Prof. Dr. Andreas Frey, Aron Fink und Patrick Naumann einen Artikel zu kompetenzorientierten adaptiven Hochschulklausuren veröffentlicht. Im Artikel wird ausgeführt, wie Hochschulklausuren auf Basis einer zielgerichteten neuartigen Kombination von Methoden, Qualitätsstandards und Ansätze der Psychometrie und der pädagogisch-psychologischen Diagnostik verbessert werden können. Das Manuskript bezieht sich auf aktuelle Entwicklungen im Bereich der psychologischen Diagnostik und zeigt auf, wie diese Lösungen bei der großen Herausforderung des digitalen Wandels an Hochschulen bereitstellen können.

Der Artikel ist hier verfügbar:

Spoden, C., Frey, A., Fink, A., & Naumann, P. (2022). E-Klausuren für die Hochschule: Zeit der Veränderung. Das In-Mind Magazin. Verfügbar unter: https://de.in-mind.org/article/e-klausuren-fuer-die-hochschule-zeit-der-veraenderung

21. März 2022

Zusammen mit Dr. Ulrich Ludewig, Theresa Schlitter, Dr. Ramona Lorenz, Ruben Kleinkorres, Dr. Rahim Schaufelberger und Prof'in. Dr. Nele McElvany hat Prof. Dr. Andreas Frey einen Schulpanel-Bericht zur Lesekompetenz von Viertklässler*innen vor und während der COVID-19 Pandemie veröffentlicht. Für den Bericht wurden Daten von 4.290 Viertklässler*innen aus 111 Schulen in Deutschland, die 2016 und 2021 den IGLU-Lesekompetenztest bearbeiteten, ausgewertet. Verglichen mit 2016 weisen Viertklässler*innen im Jahr 2021, die zu diesem Zeitpunkt mehr als ein Jahr von COVID-19-bedingten Einschränkungen der Beschulung betroffen waren, im Mittel eine statistisch signifikante und substanziell geringere Lesekompetenz auf.

Der vollständige Bericht ist hier verfügbar:

Ludewig, U., Schlitter, T., Lorenz, R., Kleinkorres, R., Schaufelberger, R., Frey, A. & McElvany, N. (2022). Die COVID-19 Pandemie und Lesekompetenz von Viertklässler*innen. Ergebnisse der IFS-Schulpanelstudie 2016-2021. Dortmund: Technische Universität Dortmund, Institut für Schulentwicklungsforschung. DOI: 10.17877/DE290R-22667

Eine englischsprachige Version unter Mitarbeiter von Dr. Christoph König ist hier verfügbar:

Ludewig, U., Kleinkorres, R., Schaufelberger, R., Lorenz, R., König, C., Frey, A., & McElvany, N. (2022). COVID-19 Pandemic and Student Reading Achievement –Findings from a School Panel Study. Available at: https://psyarxiv.com/hrzae/download

18. März 2022

Die Arbeitseinheit Pädagogische Psychologie mit Schwerpunkt Beratung, Diagnostik und Evaluation heißt heute Markus Spitzer als neuen Mitarbeiter willkommen!

01. März 2022

Dr. Christoph König und Prof. Dr. Andreas Frey konnten in einer Meta-Analyse zeigen, dass sich die coronabedingten Schulschließungen in den Jahren 2020 und 2021 mit einem mittleren Effekt von -0.17 negativ auf die Leistung von Schülerinnen und Schülern an allgemeinbildenden Schulen ausgewirkt haben. Die Meta-Analyse ist in Educational Measurement: Issues and Practice erschienen und kann hier abgerufen werden.

08. Februar 2022

01. Februar 2022

Unser rundum gelungenes Jahr 2021 haben wir mit einer Wanderung um die Saalburg im schönsten stimmungsvollen Schneegestöber abgeschlossen. Mit Hund, Plätzchen, Stullen, heißem Äppler und Tee nahmen wir die teils anspruchsvolle und reizvolle Wanderstrecke in Angriff. Anderthalb Kilometer vor dem Ziel musste eine Abordnung mit dem lahmenden Hund zurückbleiben. Der Chef leitete in der aufkommenden Dunkelheit die Rettung und Bergung des Tieres ein und brachte alle wieder heil zum Ziel zurück, wo wir uns zum Abschluss mit den verbliebenen Leckereien und dem Arbeitsbericht des vergangenen Jahres belohnten. Es war sehr amüsant und wir lachten viel über uns selbst.

Die gesamte Abteilung hofft, dass mit diesem positiven Abschluss ein gutes Jahr für uns alle eingeläutet wird und wünscht unseren Besuchern dieser Seite fröhliche Weihnachtstage und ein glückliches und erfolgreiches neues Jahr!

13. Januar 2022

Am Arbeitsbereich Pädagogische Psychologie ist zum nächstmöglichen Zeitpunkt die Stelle für eine*n wissenschaftliche Mitarbeiter*in (m/w/d) (E13 TV-G-U, 70%-Teilzeit oder Vollzeit) zu besetzen.

Die Stelle ist im BMBF-Projekt „Implementierung von KI-basiertem Feedback und Assessment mit Trusted Learning Analytics in Hochschulen“ (IMPACT) verortet. Das Verbundprojekt IMPACT fördert die Verbesserung der Hochschulbildung durch den skalierbaren Einsatz von Verfahren der Künstlichen Intelligenz (KI) zur (teil-)automatisierten Analyse von Texten und zur Generierung hochinformativem Feedbacks.

Die Arbeit an einer Dissertation oder Habilitation ist möglich und erwünscht.

Die ausführliche Stellenbeschreibung befindet sich hier. Bewerbungen mit den üblichen Unterlagen sind bis zum 19.01.2022 an Prof. Dr. Andreas Frey zu senden.

22. Dezember 2021

Die Arbeitseinheit Pädagogische Psychologie mit Schwerpunkt Beratung, Diagnostik und Evaluation heißt heute Diana Dusny als neue Mitarbeiterin willkommen!

01. Dezember 2021

Dr. Thomas Dreisörner gab im Rahmen des Projekts „Coronabedingte Bildungsbenachteiligungen erkennen und verringern“ (CoBi) ein Interview zu einem systematischen Review zu den Effekten der coronabedingten Schulschließungen im Frühjahr 2020. Das Interview ist nun im Journal Frankfurt abrufbar: Lernen, zu Hause lernen. Die Studie kann hier abgerufen werden: Hammerstein, S., König, C., Dreisörner, T., & Frey, A. (2021). Effects of COVID-19-Related School Closures on Student Achievement-A Systematic Review, Frontiers in Psychology, 12, 746289. https://doi.org/10.3389/fpsyg.2021.746289 Die offizielle Pressemitteilung ist hier zu finden: Studie zeigt: Distanzunterricht genauso effektiv wie Sommerferien

11. November 2021

Prof. Dr. Andreas Frey und Aron Fink haben ein Buchkapitel mit dem Titel „Increasing test efficiency in an international assessment of teachers' general pedagogical knowledge through multidimensional adaptive testing” im von der OECD herausgegebenen Buch „Teaching as a Knowledge Profession - Studying Pedagogical Knowledge across Education Systems” veröffentlicht.

In diesem Kapitel erörtert sie das Potenzial von multidimensionalen adaptiven Testen (MAT) zur Steigerung der Messeffizienz groß angelegter Vergleichsstudien am Beispiel des Teacher Knowledge Survey Assessment Moduls, welches Teil des Teaching and Learning International Survey (TALIS) 2024 sein wird. Der Beitrag ist hier verfügbar:

Frey, A., & Fink, A. (2021). Increasing test efficiency in an international assessment of teachers’ general pedagogical knowledge through multidimensional adaptive testing. In H. Ulferts (ed.). Teaching as a Knowledge Profession: Studying Pedagogical Knowledge across Education Systems (pp. 123—140). OECD Publishing. https://doi.org/10.1787/e823ef6e-en. 

28. Oktober 2021

Das Forum Bildung fand auf der Bühne der Bildungsmedien auf der diesjährigen Buchmesse statt. Es wurde über die Herausforderungen der durch Corona verstärkten Bildungsbenachteiligungen gesprochen. Anlass war das im Juni 2021 als Pre-Print veröffentliche systematische Review „Effects of COVID-19-Related School Closures on Student Achievements – A Systematic Review“. Die zugehörige Pressemeldung der Goethe-Universität erzeugte eine große Medienresonanz und nachfolgende Diskussionen. Was die Inhalte der Studie sind, wie die aktuelle Situation aussieht und was für Schlussfolgerungen daraus gezogen werden können, besprachen Prof. Dr. Andreas Frey mit Karin Plötz, Direktorin LitCam.

Das Video ist hier verfügbar:

27. Oktober 2021 (Video hinzugefügt am 01. November 2021)

Die Arbeitseinheit Pädagogische Psychologie mit Schwerpunkt Beratung, Diagnostik und Evaluation heißt heute Marion Schneckenbühl als neue Mitarbeiterin willkommen!

04. Oktober 2021

Das Projekt „Digital Teaching and Learning Lab – DigiTeLL“ der Goethe-Universität Frankfurt wird von der Stiftung Innovation in der Hochschullehre von 2021 bis 2024 gefördert. Es dient des Aufbaus, Betriebs und Implementation einer Innovationsstruktur zur Entwicklung, Integration und Weiterentwicklung digitaler Lehr-Lern- und Prüfungsszenarien. Prof. Dr. Andreas Frey leitet das DigiTeLL-Querschnittsthema „Digitales Prüfen“. Hierdurch können die in den Vorläuferprojekten KAT-HS und HIKOF-DL entwickelten Elemente des digitalen Prüfens an der Goethe-Universität einem breiten Kreis an Nutzerinnen und Nutzern zur Verfügung gestellt und diese im Prozess weiterentwickelt werden.

28. September 2021

Vom 15. Bis zum 17. September 2021 fand die 15. Tagung der Fachgruppe Methoden und Evaluation (FGME) der Deutschen Gesellschaft für Psychologie (DGPs) als virtuelle Veranstaltung statt. Die Tagung wurde von der Universität Mannheim ausgerichtet. Dr. Christoph König hielt einen Vortrag mit dem Titel „Accounting for heterogeneity when specifying informative prior distributions for Bayesian multiple regression models – A novel similarity measure”. Aron Fink hielt den Vortrag „Berücksichtigung der Messfehler in den Itemparametern beim computerisierten adaptiven Testen“. Patrick Naumann präsentierte ein Poster mit dem Titel „Emotionale Effekte von computerisierten adaptiven Hochschulklausuren“. Weitere Informationen zur Konferenz der FGME finden Sie hier.

17. September 2021

Am 19.7.2021 hielt Prof. Dr. Andreas Frey auf dem 32nd International Congress of Psychology (ICP) eine Keynote. Der Titel seines Vortrags lautete „Computerized Adaptive Testing in Psychological Research and Application“. Der Kongress findet alle vier Jahre statt und ist einer der weltweit größten internationalen psychologischen Veranstaltungen. Zum ersten Mal wurde er 1889 abgehalten. Das Abstract des Beitrags ist hier zu finden: https://whova.com/embedded/session/csg_202107/1774435/

Zur Videoaufzeichnung der Keynote:

22. Juli 2021

Prof. Dr. Andreas Frey und Prof. Dr. Christian Spoden haben ein Buch herausgegeben, welches ein hochschul- und fächerübergreifend einsetzbares Konzept für psychometrisch fundierte digitale Klausuren auf neuestem wissenschaftlichem Stand vorstellt. Zentral für das Konzept ist die Nutzung digitaler Technologien, mit deren Hilfe Klausuren deutlich individualisierter, messgenauer und fairer gestaltet werden können. Dabei werden Hochschulklausuren als kriteriumsorientierte, computerisierte adaptive Testverfahren konzipiert. Im Rahmen dieses Buches werden alle Arbeitsschritte für die psychometrisch fundierte Messung von Kompetenzständen mit Hilfe von E-Klausuren ausführlich erläutert.

Das Werk enthält auch Beiträge von Aron Fink und Patrick Naumann, die Mitglieder der Arbeitseinheit sind. Mit der Veröffentlichung, die bei Pabst Science Publishers erfolgte, wird ein Meilenstein des KAT-HS-Projektes (Kriteriumsorientiertes Testen in der Hochschule) erreicht.

Spoden, C. & Frey, A. (Hrsg.). (2021). Psychometrisch fundierte E-Klausuren für die Hochschule. Lengerich: Pabst Science Publishers.

06. Juli 2021

Prof. Dr. Andreas Frey verfasste zusammen mit Prof. Dr. Christian Spoden und Prof. Dr. Martin Schultze einen Kommentar, der Bezug nimmt auf ein Positionspapier zur Verbesserung von schriftlichen Prüfungen im Psychologiestudium. Im Kommentar wird der aktuelle Stand im Bereich der Hochschulklausuren im Psychologiestudium aufgezeigt. Der Beitrag wurde in der Psychologischen Rundschau veröffentlicht. Frey, A., Spoden, C., Schultze, M. (2021). Die Zukunft der Hochschulklausuren hat bereits begonnen. Psychologische Rundschau, 72(2), 113–116. https://doi.org/10.1026/0033-3042/a000528

19. Mai 2021

Aron Fink und Patrick Naumann verfassten zusammen mit Dr. Christoph König einen Kommentar, der Bezug nimmt auf ein Positionspapier zur Verbesserung von schriftlichen Prüfungen im Psychologiestudium. Im Kommentar werden die Vorteile von computerisierten adaptiven Testen für Klausuren im Psychologiestudium aufgezeigt. Der Beitrag wurde in der Psychologischen Rundschau veröffentlicht.

Fink, A., Naumann, P. & König, C. (2021). Computerisierte adaptive Klausuren im Psychologiestudium. Psychologische Rundschau, 72(2), 125–127. https://doi.org/10.1026/0033-3042/a000532

19. Mai 2021

Prof. Dr. Andreas Frey und Dr. Franziska Wenzel entwickelten und evaluierten zusammen mit Dr. Lena Engelhardt, Prof. Dr. Johannes Naumann, Prof. Dr. Frank Goldhammer, Prof. Dr. Holger Horz und Dr. Katja Hartig ein Rahmenkonzept zur verhaltensbasierten Erfassung von Informations- und Kommunikationstechnologie(ICT)-bezogenen Fähigkeiten. Konkret dient das Rahmenkonzept dazu, die Kompetenz einer Person im Umgang mit ICT (z. B. das Zugreifen auf Informationen, der Umgang mit Applikationen, das Teilen von Informationen mit anderen oder die Einschätzung der Vertrauenswürdigkeit von Informationen) mithilfe von verhaltensbasierten Items, die ICT-Umgebungen simulieren und tatsächliche Interaktion zur Aufgabenlösung erfordern, angemessen einschätzen und bewerten zu können. Der Artikel wurde kürzlich in der Zeitschrift Frontiers in Education veröffentlicht.

Engelhardt, L., Naumann, J., Goldhammer, F., Frey, A., Horz, H., Hartig, K., & Wenzel, S. F. C. (2021). Development and Evaluation of a Framework for the Performance-Based Testing of ICT Skills. Frontiers in Education, 6, Article 668860. https://doi.org/10.3389/feduc.2021.668860

19. Mai 2021

Im Rahmen des Distr@l-Förderprogramms fördert die hessischen Landesregierung das Projekt „Hoch informatives und Kompetenzorientiertes Feedback für das Digitale Lernen (HIKOF-DL)“ welches in Kooperation mit dem DIPF sowie „studiumdigitale“ durchgeführt wird. Ziel des Vorhabens ist es, zwei Feedback-Systeme zum formativen und summativen Feedback zu implementieren und zu einem einheitlichen Konzept zu hochinformativem und handlungsaktivem Feedback zum Kompetenzerwerb für Lernende zu vereinen. Das Projekt baut unter anderem auf den Ergebnissen von KAT-HS auf und führt dieses fort. Mehr dazu finden Sie HIER.

07. Mai 2021

Aron Fink, Prof. Dr. Christian Spoden, Prof. Dr. Andreas Frey und Patrick Naumann haben eine Softwareinformation zur KAT-HS App in der Diagnostica veröffentlicht. In dieser werden die Möglichkeiten zur Konstruktion, Administration und Auswertung kriteriumsorientierter, computerisierter adaptiver und nicht-adaptiver Tests mit der in der Arbeitseinheit entwickelten, R-basierten open-source KAT-HS-App erläutert. Die App ist nach Registrierung über https://kat-hs.uni-frankfurt.de/materialien/software/ für Forschung und Lehre kostenfrei erhältlich.

Fink, A., Spoden, C., Frey, A., & Naumann, P. (2021). Kriteriumsorientiertes adaptives Testen mit der KAT-HS-App. Diagnostica, 67(2), 110 – 114. https://doi.org/10.1026/0012-1924/a000268 

26. April 2021

Im Projekt Coronabedingte Bildungsbenachteiligung erkennen und verringern (CoBi) wurde durch die Beisheim Stiftung eine finanzielle Unterstützung für eine Laufzeit von zwei Jahren bewilligt.

Derzeit wird ein Literaturreview erarbeitet "A systematic literature review on effects of school closures during the COVID-19 pandemic on student learning outcomes" und erste Ergebnisse dazu in einem Tagungsbeitrag zur digiGEBF21 Thementagung „Bildung und Corona“ von Prof. Dr. Andreas Frey vorgestellt.

19. April 2021

Prof. Dr. Andreas Frey, Prof. Dr. Christian Spoden und Dr. Sebastian Born haben einen Artikel über die Konstruktion und Durchführung von psychometrisch fundierten Hochschulprüfungen geschrieben, der nun veröffentlicht wurde. Das von ihnen vorgeschlagene Vorgehen umfasst (a) die Festlegung des interessierenden Inhaltsbereichs in Bezug auf die Lernziele des Kurses, (b) die Festlegung eines Messgegenstandes, (c) die Operationalisierung des Messgegenstands durch Testaufgaben, (d) die standardisierte Durchführung der Prüfung, (e) die Skalierung mit Modellen der Item-Response-Theorie (IRT) und (f) die Festlegung von Notenstufen mit Standardsetzungsverfahren. Empirische Ergebnisse aus sechs Testzyklen einer Universitätsprüfung zeigen, dass dieses Vorgehen unter typischen Universitätsbedingungen erfolgreich implementiert und angewendet werden kann.

Der Artikel ist hier verfügbar: https://www.psychologie-aktuell.com/fileadmin/Redaktion/Journale/ptam-2020-4/PTAM_4-2020_21900493_ebook_frey_4.pdf

Frey, A., Spoden, C., & Born, S. (2020). Construction of Psychometrically Sound Written University Exams. Psychological Test and Assessment Modeling, 65(4), 415-525.

15. Januar 2021