Skip to main content
Open AccessSoftwareinformation

Kriteriumsorientiertes adaptives Testen mit der KAT-HS-App

Published Online:https://doi.org/10.1026/0012-1924/a000268

Zusammenfassung. In dieser Softwareinformation werden die Möglichkeiten zur Konstruktion, Administration und Auswertung kriteriumsorientierter, computerisierter adaptiver und nicht-adaptiver Tests mit der R-basierten open-source KAT-HS-App erläutert. Die App ermöglicht unter anderem auch die Anwendung der kontinuierlichen Kalibrierungsstrategie von Fink, Born, Spoden und Frey (2018).


Criterion-Referenced Adaptive Tests Using the KAT-HS App

Abstract. This software demonstration presents the possibilities for the construction, administration, and evaluation of criterion-referenced, computerized adaptive and nonadaptive tests with the R-based open-source KAT-HS app. This app enables users to apply the continuous item calibration strategy of Fink, Born, Spoden, and Frey (2018).

Literatur

  • Battauz, M. (2015). equateIRT: An R package for IRT test equating. Journal of Statistical Software, 8, 7, 1 – 22. https://doi.org/10.18637/jss.v068.i07 First citation in articleGoogle Scholar

  • Bock, R. D. & Aitken, M. (1981). Marginal maximum likelihood estimation of item parameters: An application of an EM algorithm. Psychometrika, 46, 443 – 459. https://doi.org/10.1007/BF02293801 First citation in articleCrossrefGoogle Scholar

  • Born, S., Fink, A., Spoden, C. & Frey, A. (2019). Evaluating different equating setups in the continuous item pool calibration for computerized adaptive testing. Frontiers in Psychology, 10 1 277 https://doi.org/10.3389/fpsyg.2019.01277 First citation in articleCrossrefGoogle Scholar

  • Chalmers, R. P. (2012). mirt: A multidimensional item response theory package for the R environment. Journal of Statistical Software, 8, 6, 1 – 29. https://doi.org/10.18637/jss.v048.i06 First citation in articleGoogle Scholar

  • Chalmers, R. P. (2016). Generating adaptive and non-adaptive test interfaces for multidimensional item response theory applications. Journal of Statistical Software, 1, 5, 1 – 39. https://doi.org/10.18637/jss.v071.i05 First citation in articleGoogle Scholar

  • Chang, W., Cheng, J., Allaire, J. J., Xie, Y. & McPherson, J. (2019). Shiny: Web Application Framework for R (R package version 1.3.2) [Computer Software]. First citation in articleGoogle Scholar

  • ETH Zürich, Lehrentwicklung und -technologie (2019). Safe Exam Browser (Version 2.2.3). [Computer Software]. Zürich: ETH Zürich, Lehrentwicklung und -technologie (LET). First citation in articleGoogle Scholar

  • Fink, A., Born, S., Frey, A. & Spoden, C. (2018). A continuous calibration strategy for computerized adaptive testing. Psychological Test and Assessment Modeling, 60, 327 – 346. First citation in articleGoogle Scholar

  • Frey, A. (2020). Computerisiertes adaptives Testen. In H. MoosbruggerA. Kelava (Hrsg.), Testtheorie und Fragebogenkonstruktion (3., aktual. und überarb. Auflage, S. 501 – 525). Berlin, Heidelberg: Springer. https://doi.org/10.1007/978-3-662-61532-4_20 First citation in articleCrossrefGoogle Scholar

  • Frey, A., Bernhardt, R. & Born, S. (2017). Umgang mit Itempositionseffekten bei der Entwicklung computerisierter adaptiver Tests. Diagnostica, 63, 167 – 178. https://doi.org/10.1026/0012-1924/a000173 First citation in articleLinkGoogle Scholar

  • Frey, A. & Fink, A. (in press). Controlling for item position effects when adaptive testing is used in Large-scale assessments. In L. Khorramdel, M. von Davier & K. Yamamoto (Eds.), Innovative computer-based international Large-Scale Assessments – foundations, methodologies, and quality assurance procedures. New York, NY: Springer. First citation in articleGoogle Scholar

  • Glas, C. A. W. (2016). Maximum-likelihood estimation. In W. J. van der Linden (Ed.), Handbook of item response theory, volume two: statistical tools (pp. 197 – 216). London: Chapman and Hall. First citation in articleGoogle Scholar

  • Spoden, C. & Buchwald, F. (2018). Diagnostische Tests mit R und knitr: Erstellung, Auswertung und Vorbereitung der Rückmeldung. Diagnostica, 64, 49 – 57. https://doi.org/10.1026/0012-1924/a000189 First citation in articleLinkGoogle Scholar

  • Spoden, C. & Frey, A. (Hrsg.). (im Druck). Psychometrisch fundierte E-Klausuren für die Hochschule. Lengerich: Pabst Science Publishers. First citation in articleGoogle Scholar

  • Spoden, C., Frey, A., Fink, A. & Naumann, P. (2020). Kompetenzorientierte elektronische Hochschulklausuren im Studium des Lehramts. In K. KasparM. Becker-MrotzeckJ. HofhuesJ. KönigD. Schmeinck (Hrsg.), Bildung, Schule und Digitalisierung (S. 184 – 189). Münster: Waxmann. First citation in articleGoogle Scholar

  • Linden, W. J. van der (2016). Handbook of item response theory, volume one: models. London: Chapman and Hall. https://doi.org/10.1201/9781315374512 First citation in articleCrossrefGoogle Scholar

  • Williams, E. J. (1949). Experimental designs balanced for the estimation of residual effects of treatments. Australian Journal of Chemistry, 2, 149 – 168. First citation in articleCrossrefGoogle Scholar

  • Xie, Y. (2015). Dynamic documents with R and knitr (The R series, 2nd ed.). Boca Raton, FL: Chapman & Hall / CRC. First citation in articleGoogle Scholar