Schlagworte
Messung
Szenarien-basierte Messung
Selbsteinschätzung
Medienbezogene Lehrkompetenz
Lehrkräfte
Zitationsvorschlag
Lizenz
Copyright (c) 2024 Johanna Vejvoda, Matthias Stadler, Florian Schultz-Pernice, Julia Glas, Frank Fischer, Michael Sailer
Dieses Werk steht unter der Lizenz Creative Commons Namensnennung 4.0 International.
Abstract
Medienbezogene Kompetenzen von Lehrkräften sind unabdingbar, um Schüler:innen auf Teilhabe, Partizipation und eine verantwortliche Mitgestaltung in einer Kultur der Digitalität vorzubereiten. Konkret benötigen Lehrkräfte hierzu medienbezogene Basis- und Lehrkompetenzen. Für die zielgerichtete und erfolgreiche Förderung dieser Kompetenzen im Rahmen der Lehrkräftebildung sind Instrumente zur Messung dieser Medienkompetenzen hilfreich. Bestehende Instrumente greifen allerdings zumeist auf einfache, nicht selten sehr allgemein formulierte Selbsteinschätzungen zurück. Dies erschwert eine valide Messung von Kompetenzen. In diesem Beitrag wird ein alternativer Messansatz vorgestellt, der Selbsteinschätzungen von Medienkompetenzen mittels Szenarien kontextualisiert und damit präzisiert. Die Szenarien-Basierung führt zu einem validen Messergebnis, hat aber für den Einsatz im Feld den Nachteil, dass die Messung deutlich umfangreicher ausfällt. Dem begegnen wir im vorliegenden Beitrag durch die Entwicklung einer Kurzskala in einem mehrstufigen Verfahren. Auf Basis eines Datensatzes von N = 552 (angehenden) Lehrkräften wird eine szenarienbasierte Kurzskala zur Messung instrumenteller und kritisch-reflexiver Medienkompetenzen sowie medienbezogener Lehrkompetenzen entwickelt. Diese Kurzskala wird in einer weiteren Studie mit N = 204 Lehrkräften nochmals validiert. Die Ergebnisse beider Studien unterstützen die Validität der Kurzskala. Für die Lehrkräftebildung und Forschung wird somit ein akzeptanzförderndes und ressourcenschonendes Instrument bereitgestellt, das eine reliable und valide Messung instrumenteller und kritisch-reflexiver Medienkompetenzen sowie medienbezogener Lehrkompetenzen erlaubt.
Literatur
Baacke, Dieter. 1997. Medienpädagogik. Grundlagen der Medienkommunikation. Berlin, Boston: De Gruyter.
Bollen, Kenneth A. 1989. Structural Equations with Latent Variables. New York: John Wiley & Sons. https://doi.org/10.1002/9781118619179.
Brinda, Torsten, Niels Brüggen, Ira Diethelm, Thomas Knaus, Sven Kommer, Christine Kopf, Petra Missomelius, Rainer Leschke, Friederike Tilemann, und Andreas Weich. 2019. «Frankfurt-Dreieck zur Bildung in der digital vernetzten Welt – Ein interdisziplinäres Modell». merz | medien + erziehung 63 (4): 69–75. https://doi.org/10.21240/merz/2019.4.15.
Buckingham, David. 2003. Media Education: Literacy, Learning and Contemporary Culture. Cambridge: Polity Press
Chi, Michelene T. H. und Ruth Wylie. 2014. «The ICAP Framework: Linking Cognitive Engagement to Active Learning Outcomes». Educational Psychologist 49 (4): 219–43. https://doi.org/10.1080/00461520.2014.965823.
DCB. 2017. «Kernkompetenzen von Lehrkräften für das Unterrichten in einer digitalisierten Welt». merz 4: 65–74. https://www.merz-zeitschrift.de/fileadmin/user_upload/merz/PDFs/merz_4-17_Kernkompetenzen_Von_Lehrkraeften.pdf.
Ferrari, Anusca. 2012. Digital Competence in Practice: An Analysis of Frameworks. Luxemburg: Publications Office of the European Union. https://doi.org/10.2791/82116.
Ferrari, Anusca. 2013. DIGCOMP: A Framework for Developing and Understanding Digital Competence in Europe. Luxemburg: Publications Office of the European Union. https://doi.org/10.2788/52966.
Fraillon, Julian, John Ainley, Wolfram Schulz, Tim Friedman, und Eveline Gebhardt, Hrsg. 2014. Preparing for Life in a Digital World: IEA International Computer and Information Literacy Study. International Report: Springer. https://doi.org/10.1007/978-3-319-14222-7.
Ghomi, Mina, und Christine Redecker. 2019. «Digital Competence of Educators (DigCompEdu): Development and Evaluation of a Self-Assessment Instrument for Teachersʼ Digital Competence». In Proceedings of the 11th International Conference on Computer Supported Education (CSEDU 2019), 541–48. SciTePress. https://doi.org/10.5220/0007679005410548.
Groeben, Norbert. 2004. «Medienkompetenz». In Lehrbuch der Medienpsychologie, herausgegeben von Roland Mangold, Peter Vorderer, und Gary Bente, 27–49. Göttingen: Hogrefe.
Hobbs, Renee, Damiano Felini, und Gianna Cappello. 2011. «Reflections on Global Developments in Media Literacy Education: Bridging Theory and Practice». Journal of Media Literacy Education 3 (2): 66–73. https://files.eric.ed.gov/fulltext/EJ985668.pdf.
ISB. 2017. «Kompetenzrahmen zur Medienbildung an bayerischen Schulen». https://mebis.bycs.de/assets/uploads/mig/2_2017_03_Kompetenzrahmen-zur-Medienbildung-an-bayerischen-Schulen-1.pdf.
Kelly, M. G., und A. McAnear, Hrsg. 2002. National Educational Technology Standards for Teachers: Preparing Teachers to Use Technology. Eugene: International Society for Technology in Education (ISTE). https://eric.ed.gov/?id=ED473131.
Kersch, Dorotea, und Mellinee Lesley. 2019. «Hosting and Healing: A Framework for Critical Media Literacy Pedagogy». Journal of Media Literacy Education 11: 37–48. https://doi.org/10.23860/JMLE-2019-11-3-4.
King, Gary, C. J. L. Murray, J. A. Salomon, und A. Tandon. 2004. «Enhancing the Validity and Cross-Cultural Comparability of Measurement in Survey Research». American Political Science Review 98 (1): 191–207. https://doi.org/10.1017/s000305540400108x.
King, Gary, und Jonathan Wand. 2007. «Comparing Incomparable Survey Responses: Evaluating and Selecting Anchoring Vignettes». Political Analysis 15 (1): 46–66. https://doi.org/10.1093/pan/mpl011.
KMK. 2016. Bildung in der digitalen Welt. Strategie der Kultusministerkonferenz. KMK. https://www.kmk.org/fileadmin/Dateien/veroeffentlichungen_beschluesse/2016/2016_12_08-Bildung-in-der-digitalen-Welt.pdf.
KMK. 2021. Lehren und Lernen in der digitalen Welt. Die ergänzende Empfehlung zur Strategie «Bildung in der digitalen Welt». KMK. https://www.kmk.org/fileadmin/veroeffentlichungen_beschluesse/2021/2021_12_09-Lehren-und-Lernen-Digi.pdf.
Krumsvik, R. J. 2011. «Digital Competence in the Norwegian Teacher Education and Schools». Högre Utbildning 1 (1): 39–51. https://hogreutbildning.se/index.php/hu/article/view/874/.
Lachner, Andreas, Iris Backfisch, und Kathleen Stürmer. 2019. «A Test-Based Approach of Modeling and Measuring Technological Pedagogical Knowledge». Computers & Education 142: 103645. https://doi.org/10.1016/j.compedu.2019.103645.
Mishra, Punya, und Matthew J. Koehler. 2006. «Technological Pedagogical Content Knowledge: A Framework for Teacher Knowledge». Teachers College Record 108 (6): 1017–54. https://doi.org/10.1111/j.1467-9620.2006.00684.x.
Montoya, Amanda K. und Michael C. Edwards. 2021. «The Poor Fit of Model Fit for Selecting Number of Factors in Exploratory Factor Analysis for Scale Evaluation». Educational and Psychological Measurement 81 (3): 413–40. https://doi.org/10.1177/0013164420942899.
Newman, Tabetha. 2009. A Review of Digital Literacy in 3–16 Year Olds: Evidence, Developmental Models, and Recommendations. Part C: Catalogue of Evidence. https://kipdf.com/a-review-of-digital-literacy-in-3-16-year-olds-evidence-developmental-models-and_5aaf5c161723dd349c80a11b.html (07.02.2024).
Nieding, Gerhild, Peter Ohler, Anna Katharina Diergarten, Thomas Möckel, Günter Daniel Rey, und Wolfgang Schneider. 2017. «The Development of Media Sign Literacy - A Longitudinal Study With 4-Year-Old Children». Media Psychology 20 (3): 401–27. https://doi.org/10.1080/15213269.2016.1202773.
Ninaus, Manuel, und Michael Sailer. 2022a. «Closing the Loop – The Human Role in Artificial Intelligence for Education». Frontiers in Psychology 13: 956798. https://doi.org/10.3389/fpsyg.2022.956798.
Ninaus, Manuel, und Michael Sailer 2022b. «Zwischen Mensch und Maschine: Künstliche Intelligenz zur Förderung von Lernprozessen». Lernen und Lernstörungen 11 (4): 213–24. https://doi.org/10.1024/2235-0977/a000386.
OECD. 2015. Students, Computers and Learning. Making the Connection. Paris: OECD Publishing. https://doi.org/10.1787/9789264239555-en.
Olaru, Gabriel, Ulrich Schroeders, Johanna Hartung, und Oliver Wilhelm. 2019. «Ant Colony Optimization and Local Weighted Structural Equation Modeling. A Tutorial on Novel Item and Person Sampling Procedures for Personality Research». European Journal of Personality 33 (3): 400–19. https://doi.org/10.1002/per.2195.
R-Core-Team. 2023. R: A Language and Environment for Statistical Computing. https://www.R-project.org.
Raborn, Anthony W. und Walter L. Leite. 2018. «ShortForm: An R Package to Select Scale Short Forms With the Ant Colony Optimization Algorithm». Applied Psychological Measurement 42 (6): 516–17. https://doi.org/10.1177/0146621617752993.
Rammstedt, Beatrice, und Constanze Beierlein. 2014. «Can’t We Make it Any Shorter? The Limits of Personality Assessment and Ways to Overcome Them». Journal of Individual Differences 35 (4): 212–20. https://doi.org/10.1027/1614-0001/a000141.
Redecker, Christine. 2017. European Framework for the Digital Competence of Educators: DigCompEdu. Luxemburg: Publications Office of the European Union. https://doi.org/10.2760/159770.
Rubach, Charlott, und Rebecca Lazarides. 2021. «Addressing 21st-Century Digital Skills in Schools - Development and Validation of an Instrument to Measure Teachersʼ Basic ICT Competence Beliefs». Computers in Human Behavior 118: 106636. https://doi.org/10.1016/j.chb.2020.106636.
Sailer, Michael, Julia Murboeck, und Frank Fischer. 2021. «Digital Learning in Schools: What Does It Take Beyond Digital Technology?». Teaching and Teacher Education 103: 103346. https://doi.org/10.1016/j.tate.2021.103346.
Sailer, Michael, Matthias Stadler, Florian Schultz-Pernice, Ulrike Franke, Carola Schöffmann, Viktoriia Pantiotova, Lana Husagic, und Frank Fischer. 2021. «Technology-Related Teaching Skills and Attitudes: Validation of a Scenario-Based Self-Assessment instrument for Teachers». Computers in Human Behavior 115: 106625. https://doi.org/10.1016/j.chb.2020.106625.
Satorra, Albert, und Peter M. Bentler. 2010. «Ensuring Positiveness of the Scaled Difference Chi-square Test Statistic». Psychometrika 75 (2): 243–48. https://doi.org/10.1007/s11336-009-9135-y.
Scheiter, Katharina. 2021. «Lernen und Lehren mit digitalen Medien: Eine Standortbestimmung». Zeitschrift für Erziehungswissenschaft 24 (5): 1039–60. https://doi.org/10.1007/s11618-021-01047-y.
Scherer, Ronny, Jo Tondeur, und Fazilat Siddiq. 2017. «On the Quest for Validity: Testing the Factor Structure and Measurement Invariance of the Technology-Dimensions in the Technological, Pedagogical, and Content Knowledge (TPACK) Model». Computers & Education 112: 1–17. https://doi.org/10.1016/j.compedu.2017.04.012.
Schmidt, Denise A., Evrim Baran, Ann D. Thompson, Punya Mishra, Matthew J. Koehler, und Tae S. Shin. 2009. «Technological Pedagogical Content Knowledge (TPACK): The Development and Validation of an Assessment Instrument for Preservice Teachers». Journal of Research on Technology in Education 42 (2): 123–49. https://doi.org/10.1080/15391523.2009.10782544.
Schorb, Bernd. 2009. «Gebildet und kompetent. Medienbildung statt Medienkompetenz?». merz 53 (5): 50–56.
Schroeders, Ulrich, Maximilian Morgenstern, Kristin Jankowsky, und Timo Gnambs. 2023. «Short-Scale Construction Using Meta-Analytic Ant Colony Optimization: A Demonstration With the Need For Cognition Scale». https://doi.org/10.31234/osf.io/nw8k7.
Schroeders, Ulrich, Oliver Wilhelm, und Gabriel Olaru. 2016. «Meta-Heuristics in Short Scale Construction: Ant Colony Optimization and Genetic Algorithm». PLOS ONE 11 (11): e0167110. https://doi.org/10.1371/journal.pone.0167110.
Schweizer, Karl. 2011. «Some Thoughts Concerning the Recent Shift From Measures With Many Items to Measures With Few Items». European Journal of Psychological Assessment 27 (2): 71–72. https://doi.org/10.1027/1015-5759/a000056.
Senkbeil, Martin, Jan Marten Ihme, und Jörg Wittwer. 2013. «The Test of Technological and Information Literacy (TILT) in the National Educational Panel Study: Development, Empirical Testing, and Evidence for Validity». Journal for Educational Research Online 5: 139–61. https://doi.org/10.25656/01:8428.
Seufert, Sabine, Josef Guggemos, und Michael Sailer. 2021. «Technology-Related Knowledge, Skills, and Attitudes of Pre- and In-Service Teachers: The Current Situation and Emerging Trends». Computers in Human Behavior 115: 106552. https://doi.org/10.1016/j.chb.2020.106552.
Spanhel, Dieter. 2010. «Medienbildung statt Medienkompetenz? Zum Beitrag von Bernd Schorb (merz 5/09)». merz 54 (1): 49–54.
Stalder, Felix. 2017. Kultur der Digitalität. 2. Auflage. Berlin: Suhrkamp.
Steger, Diana, Kristin Jankowsky, Ulrich Schroeders, und Oliver Wilhelm. 2022. «The Road to Hell Is Paved With Good Intentions: How Common Practices in Scale Construction Hurt Validity». Assessment: 10731911221124846. https://doi.org/10.1177/10731911221124846.
Tulodziecki, Gerhard. 2010. «Medienkompetenz und/oder Medienbildung? Ein Diskussionsbeitrag». merz 54 (3): 48–53. https://www.merz-zeitschrift.de/ls/alle-ausgaben/pdf/gerhard-tulodziecki-medienkompetenz-und-oder-medienbildung/?preview=1&hc=0&cHash=de163d49356af222e4f68633f27af35b (07.02.2024).
Valtonen, Teemu, Erkko Sointu, Jari Kukkonen, Sini Kontkanen, Matthew C. Lambert, und Kati Mäkitalo-Siegl. 2017. «TPACK Updated to Measure Pre-Service Teachersʼ Twenty-First Century Skills». Australasian Journal of Educational Technology 33 (3): 15–31. https://doi.org/10.14742/ajet.3518.
van Laar, Ester, Alexander J. A. M. van Deursen, Jan A. G. M. van Dijk, und Jos de Haan. 2017. «The Relation Between 21st-Century Skills and Digital Skills: A Systematic Literature Review». Computers in Human Behavior 72: 577–88. https://doi.org/10.1016/j.chb.2017.03.010.
van Soest, Arthur, Liam Delaney, Colm Harmon, Arie Kapteyn, und James P. Smith. 2011. «Validating the Use of Anchoring Vignettes for the Correction of Response Scale Differences in Subjective Questions». Journal of the Royal Statistical Society: Series A (Statistics in Society) 174 (3): 575–95. https://doi.org/10.1111/j.1467-985X.2011.00694.x.
van Vliet, Paul J. A., Marilyn G. Kletke, und Goutam Chakraborty. 1994. «The Measurement of Computer Literacy: A Comparison of Self-Appraisal and Objective Tests». International Journal of Human-Computer Studies 40 (5): 835–57. https://doi.org/10.1006/ijhc.1994.1040.
Vejvoda, Johanna, Matthias Stadler, Florian Schultz-Pernice, Frank Fischer, und Michael Sailer. 2023. «Getting ready for teaching with digital technologies: Scenario-based self-assessment in teacher education and professional development». Unterrichtswissenschaft 51: 511-532. https://doi.org/10.1007/s42010-023-00186-x.