Abstract
Zusammenfassung. Seit den 1970er Jahren wird weithin angenommen, dass adaptives Testen im Vergleich zu nicht-adaptivem Testen eine motivationssteigernde Wirkung hat. In den letzten Jahren wurde jedoch wiederholt auch die gegensätzliche Sichtweise vertreten, dass sich adaptives Testen motivationsmindernd auswirken kann. Zur Klärung dieser Kontroverse wurde der Effekt adaptiven Testens mit dem Frankfurter Adaptiven Konzentrationsleistungs-Test (FAKT; Moosbrugger & Heyden, 1997) auf die Motivation zur Testbearbeitung experimentell untersucht (N = 79). Zwei unabhängige Stichproben bearbeiteten entweder eine adaptive oder eine nicht-adaptive Testform des FAKT. Die Motivation zur Testbearbeitung fiel in der adaptiven Versuchsbedingung signifikant niedriger aus als in der nicht-adaptiven Versuchsbedingung, p = .045, η2 = .051. Das Ergebnis widerspricht dem seit drei Dekaden weitgehend als Faktum angenommenen motivationssteigernden Effekt adaptiven Testens. Weitere Analysen zeigen, dass der motivationsmindernde Effekt adaptiven Testens vor allem auf die subjektive Einschätzung der Erfolgswahrscheinlichkeit zurückzuführen ist und nicht auf andere motivationale Komponenten wie die subjektive Misserfolgsbefürchtung oder die empfundene Herausforderung.
Abstract. Since the early work on Computerized Adaptive Testing (CAT), a positive effect of CAT on participants’ test-taking motivation has been widely accepted. However, in recent publications this assumption is frequently criticized and a negative effect is stated. To bring light to the controversy, the effect of adaptive testing with the Frankfurt Adaptive Concentration Test (FACT, Moosbrugger & Heyden, 1997) on test-taking motivation was examined experimentally (N = 79). Two independent samples received the FACT either in an adaptive or a non-adaptive version. Test-taking motivation was significantly lower in the adaptive condition than in the non-adaptive condition, p = .045, η2 = .051. Further analyses showed that the differences in test-taking motivation between the adaptive und the non-adaptive condition are mainly due to the perceived probability of success and not to other motivational components like the perceived probability of failure or the perceived challenge.
Literatur
1964). An introduction to motivation. Princeton: Van Nostrand.
(1992). Altering the level of difficulty in computer adaptive testing. Applied Measurement in Education, 5, 137–149.
(1975). New types of information and psychological implications. In , Computerized adaptive trait measurement: Problems and Prospects (Research Report 75-5, pp. 32–43). Minneapolis: University of Minnesota, Department of Psychology, Psychometric Methods Program.
(1976a). Effects of immediate knowledge of results and adaptive testing on ability test performance (Research Rep. 76-3). Minneapolis: University of Minnesota, Department of Psychology, Psychometric Methods Program.
(1976b). Psychological effect of immediate knowledge of results and adaptive ability testing (Research Rep. 76-4). Minneapolis: University of Minnesota, Department of Psychology, Psychometric Methods Program.
(1988). Statistical power analysis for the behavioral sciences. Hillsdale: Lawrence Erlbaum Associates.
(2004). Contributions to the theory and practice of computerized adaptive testing. Enschede: Print Partners Ipskamp.
(2006). Optimal testing with easy or difficult items in computerized adaptive testing. Applied Psychological Measurement, 30, 379–393.
(2004). Lehrbuch der psychologischen Diagnostik (3. Aufl.). Göttingen: Hogrefe.
(2006). Validitätssteigerungen durch adaptives Testen. Frankfurt am Main: Peter Lang.
(2007). Adaptives Testen. In , Testtheorie und Fragebogenkonstruktion (S. 261–278). Berlin, Heidelberg: Springer.
(2007). Hypothetischer Einsatz adaptiven Testens bei der Messung von Bildungsstandards in Mathematik. Zeitschrift für Erziehungswissenschaft, Sonderheft 8, 169–184.
(2004). Kann die Konfundierung von Konzentrationsleistung und Aktivierung durch adaptives Testen mit dem Frankfurter Adaptiven Konzentrationsleistungs-Test FAKT vermieden werden? Zeitschrift für Differentielle und Diagnostische Psychologie, 25, 1–17.
(1991). Computerized adaptive testing: Theory, applications, and standards. In , Advances in educational and psychological testing: Theory and applications (pp. 341–366). New York: Kluwer Academic/Plenum Publishers.
(1999). Psychologische Diagnostik: Ein Lehrbuch (4. Aufl.). Weinheim: Beltz.
. (1995). Einführung in die psychologische Diagnostik. Weinheim: Psychologie Verlags Union.
(1997). FAKT. Frankfurter Adaptiver Konzentrationsleistungs-Test. Bern: Huber.
(1999). The effects of test difficulty manipulation in computerized adaptive testing and self-adapted testing. Applied Measurement in Education, 12, 167–184.
(2001). FAM: Ein Fragebogen zur Erfassung aktueller Motivation in Lern- und Leistungssituationen. Diagnostica, 47, 57–66.
(2005). Computerized Adaptive Testing. In , Encyclopedia of Social Measurement. Amsterdam: Elsevier.
(2002). Computer-adaptive testing: The impact of test characteristics on perceived performance and test takers’ reactions. Journal of Applied Psychology, 87, 320–332.
(2000). Computerized Adaptive Testing: Theory and Practice. Dordrecht, Boston, London: Kluwer Academic Publishers.
. (1998). Motivationale Einflüsse auf Erwerb und Anwendung von Wissen in einem computersimulierten System. Zeitschrift für Pädagogische Psychologie, 12, 11–23.
(1999). Motivation and metacognition when learning a complex system. European Journal of Psychology of Education, 14, 541–554.
(2000). Does motivation affect performance via persistence? Learning and Instruction, 10, 293–309.
(2000). Computerized adaptive testing: A primer (2nd ed.). Mahwah: Lawrence Erlbaum Associates.
(