Teilvorhaben Adaptives Testen und Psychometrie

Laufzeit: 01.12.2011 - 31.05.2015

Das Verbundvorhaben CoSMed zielte auf die Modellierung und Messung beruflicher Kompetenzen Medizinischer Fachangestellter (MFA) und die Generierung komplexer Erklärungsmodelle zum Einfluss individueller und institutioneller Faktoren ab. Ein besonderer Stellenwert kam auch...    mehr

Das Verbundvorhaben CoSMed zielte auf die Modellierung und Messung beruflicher Kompetenzen Medizinischer Fachangestellter (MFA) und die Generierung komplexer Erklärungsmodelle zum Einfluss individueller und institutioneller Faktoren ab. Ein besonderer Stellenwert kam auch der Messung schulischer Kernkompetenzen als bedeutsamen Determinanten beruflicher Fachleistungen zu. Durch das Teilvorhaben wurde die Entwicklung und Auswertung von adaptiven Testverfahren gemäß internationalen Standards gesichert. Konkret wurden drei Ziele verfolgt: (1) Die Konstruktion je eines Item Response Theory (IRT)-basierten adaptiven Tests zur Messung mathematischer Kompetenz, naturwissenschaftlicher Kompetenz, Lesekompetenz und selbstregulativer Fähigkeiten; (2) die softwaretechnische Umsetzung der adaptiven Tests und des Hintergrundfragebogens; (3) die Unterstützung und Weiterbildung bei IRT-Skalierungen, statistischen Analysen und der Einsatz der adaptiven Tests. (…) Schwerpunkte [des Teilvorhabens] lagen in der Auswahl von Items, der Präsentation (…), der Computerisierung von Items, der Softwareprogrammierung (Hintergrundfragebogen), der Konstruktion des Booklet-Designs, der Durchführung und Kalibrierung in Thüringen, der Simulation und Erstellung der CAT-Endversion, der Planung und Durchführung der Pilotierung in Thüringen, (…) der Beschreibung des Kompetenzniveaus, der Unterstützung bei CAT-Testungen, der methodischen Unterstützung und Weiterbildung sowie der Dokumentation und Publikation. Für das Teilvorhaben wurden zusätzliche [anwendungsbezogene, psychometrische] Fragestellungen zur methodischen Neuentwicklung und Weiterentwicklung sowie Modifikationen adaptiver Algorithmen (…) untersucht. (DIPF/Projektträger)    weniger

Laufzeit: 01.11.2007 - 30.06.2014

Im Projekt wurde ein Testinstrument (Kompetenzentwicklungstest) entwickelt, mit dessen Hilfe die Kompetenzentwicklung der Schüler für das Basiskonzept Energie untersucht wurde. Dabei wurde eine Querschnittstudie über die Jahrgänge 6 bis 10 der Sekundarstufe I aus Nordrhei...    mehr

Im Projekt wurde ein Testinstrument (Kompetenzentwicklungstest) entwickelt, mit dessen Hilfe die Kompetenzentwicklung der Schüler für das Basiskonzept Energie untersucht wurde. Dabei wurde eine Querschnittstudie über die Jahrgänge 6 bis 10 der Sekundarstufe I aus Nordrhein-Westfalen durchgeführt. Des Weiteren wurde ein Teil der Querschnittsstudiengruppe zu einem Längsschnitt ausgeweitet.     weniger

Laufzeit: 01.04.2012 - 31.03.2013

In Anlehnung an Shulman wird das professionelle Wissen von Lehrkräften in fachliches, pädagogisches und fachdidaktisches Wissen unterteilt. In einer experimentellen Studie untersuchten wir, welche Rolle verfügbares Fachwissen und verfügbares pädagogisches Wissen für die Entwi...    mehr

In Anlehnung an Shulman wird das professionelle Wissen von Lehrkräften in fachliches, pädagogisches und fachdidaktisches Wissen unterteilt. In einer experimentellen Studie untersuchten wir, welche Rolle verfügbares Fachwissen und verfügbares pädagogisches Wissen für die Entwicklung fachdidaktischen Wissens spielen. Drei Annahmen wurden geprüft: (1.) Fachwissen und pädagogisches Wissen verschmelzen zu fachdidaktischem Wissen („Amalgam-Hypothese“), (2.) fachdidaktisches Wissen entsteht „en passant“ aus Fachwissen („Mitnahme-Hypothese“) und (3.) Fachwissen unterstützt die Nutzung von Lerngelegenheiten für fachdidaktisches Wissen („Unterstützungs-Hypothese“). Die teilnehmenden 100 Lehramtsstudierenden aus Berlin und Brandenburg wurden zufällig einem von fünf Kursen zugeteilt. Die Kurse bestanden aus je zwei Blöcken á vier Stunden. Die „Amalgam-Bedingung“ umfasste einen Block zum Fachwissen und einen Block zum pädagogischen Wissen, die „Mitnahme-Bedingung“ zwei Blöcke zum Fachwissen und die „Unterstützungs-Bedingung“ einen Block zum Fachwissen und einen Block zum fachdidaktischen Wissen. Darüber hinaus erhielt eine schwache Kontrollbedingung ausschließlich Blöcke zum pädagogischen Wissen, während eine starke Kontrollbedingung nur mit Blöcken zum fachdidaktischen Wissen konfrontiert wurde. Thematisch behandelten die fachdidaktischen Blöcke das Unterrichten von Bruchrechnung in der sechsjährigen Grundschule. Die fachlichen und pädagogischen Blöcke wiesen jeweils spezifische inhaltliche Überschneidungen mit den fachdidaktischen Blöcken auf: Die fachlichen Blöcke befassten sich mit Brüchen und Bruchrechnung ohne die Vermittlung dieser Inhalte im Schulunterricht zu thematisieren. Die pädagogischen Blöcke widmeten sich allgemein dem Thema Lernen und Lehren, d.h. sie behandelten Repräsentationsformen, Schülervorstellungen, Lernschwierigkeiten und Lehrstrategien ohne Bezug zur Mathematik herzustellen. Entsprechend gab es keine inhaltliche Überschneidung zwischen fachlichen und pädagogischen Blöcken. Die zentrale abhängige Variable, das fachdidaktische Wissen, wurde vor, zwischen und unmittelbar nach den beiden Kursblöcken sowie sechs Wochen nach Ende der Kurse erfasst. Der Itempool zur Erfassung des fachdidaktischen Wissens umfasste 41 Items, welche bei starker Verankerung teilrotiert über die Messzeitpunkte hinweg präsentiert wurden. Im Zuge der inferenzstatistischen Auswertung wurden die Antworten der Lehramtsstudierenden einer Analyse mit einem explanatory item response model mit kreuzklassifizierten Zufallseffekten für Personen und Items unterzogen. Es konnten statistisch signifikante Effekte sowohl für die „Amalgam-“ als auch für die „Mitnahme-Bedingung“ nachgewiesen werden. Diese waren jedoch im Vergleich zur starken Kontrollgruppe, welche in beiden Kursblöcken explizit zum fachdidaktischen Wissen unterrichtet worden war, und auch im Vergleich zur „Unterstützungs-Bedingung“ vergleichsweise schwach ausgeprägt. Unterstützende Effekte des verfügbaren Fachwissens im Sinne einer besseren Nutzung von Lerngelegenheiten für fachdidaktisches Wissen konnten nicht nachgewiesen werden; in der starken Kontrollgruppe und in der „Unterstützungs-Bedingung“ erwarben die teilnehmenden Studierenden in vergleichbarem Ausmaß fachdidaktisches Wissen. In Hinblick auf die interne Validität unserer Studie bestätigten Ratings von Ausschnitten aus Videoaufnahmen der durchgeführten Kurse die Umsetzung der intendierten Kursinhalte. Ebenso wiesen vor, zwischen und nach den beiden Kursblöcken eingesetzte Tests zum fachlichen und pädagogischen Wissen nach, dass die Studierenden in den fachlichen und pädagogischen Blöcken entsprechende Wissensbestände aufbauten. (Projekt)    weniger

Laufzeit: 01.01.2020 - 31.12.2024

Laufzeit: 01.07.2009 - 30.09.2013

Im Zentrum des Beitrags zum Schwerpunktprogramm stehen die Beschreibung und Erklärung sowie die Konsequenzen intraindividueller Veränderungen von Schülerleistungen in Deutsch und Mathematik in der 9. und 10. Jahrgangsstufe. Die Motivation, Veränderungen von Schülerleistungen ...    mehr

Im Zentrum des Beitrags zum Schwerpunktprogramm stehen die Beschreibung und Erklärung sowie die Konsequenzen intraindividueller Veränderungen von Schülerleistungen in Deutsch und Mathematik in der 9. und 10. Jahrgangsstufe. Die Motivation, Veränderungen von Schülerleistungen zu untersuchen, rührt insbesondere daher, dass solche Veränderungen - rational und ohne methodische Sorgen betrachtet - die eigentlich interessierende Größe bei Schülerleistungen sind. Der Status quo von Schülerleistungen als Punktschätzung ist bei Selektionsentscheidungen eine relevante Größe. Bei der Beurteilung des Lernerfolgs von Schülerinnen und Schülern interessiert hingegen insbesondere die Veränderung gegenüber einem Referenzzeitpunkt bzw. der Verlauf solcher Veränderungen. Status quo und Veränderung lassen sich im Sinne intra- und interindividueller Vergleiche beim Vorliegen geeigneter Daten, insbesondere sogenannter intensiver Längsschnittdaten, simultan anstrengen. Bei der hier angestrebten Fokussierung auf intraindividuelle Veränderungen ist es wünschenswert, über eine größere Zahl an Messzeitpunkten zu verfügen. Das Projekt befasst sich mit methodischen Aspekten der Integration intra- und interindividueller Vergleiche in der Kompetenzdiagnostik. (Projekt)    weniger

Laufzeit: 2011 - 2013

Obwohl die berufliche Fachkompetenz in allen gängigen konzeptuellen Kompetenzstrukturmodellen der beruflichen Bildung als zentrale Facette und notwendige Bedingung zur erfolgreichen Bewältigung beruflicher Anforderungen charakterisiert wird, stehen in weiten Teilen beruflic...    mehr

Obwohl die berufliche Fachkompetenz in allen gängigen konzeptuellen Kompetenzstrukturmodellen der beruflichen Bildung als zentrale Facette und notwendige Bedingung zur erfolgreichen Bewältigung beruflicher Anforderungen charakterisiert wird, stehen in weiten Teilen beruflicher Domänen keine adäquaten und empirisch validierten Kompetenzmodelle zur Verfügung. Im gewerblich-technischen Bereich konnten für die kraftfahrzeug- und elektrotechnische Grundbildung durch die Forschergruppe um Nickolaus bereits erste Befunde zur Kompetenzmodellierung vorgelegt werden; für die bautechnische Grundbildung (erstes Ausbildungsjahr für die Berufe der Bauwirtschaft) steht die kompetenzdiagnostische Forschung hingegen noch am Anfang. Ziel des vorliegenden Projekts ist es, bestehende Lücken zu schließen und (1) ein auf der Basis probabilistischer Testtheorie geprüftes Instrument zur Erfassung der bautechnischen Fachkompetenz bereitzustellen, das die beruflichen Anforderungsstrukturen der Grundbildung Bautechnik adäquat abbildet, (2) ein Niveau- und Strukturmodell der bautechnischen Fachkompetenz zu entwickeln bzw. zu überprüfen, um Aussagen über die erreichten Kompetenzstände sowie die Dimensionalität der Fachkompetenz zu gewinnen,(3)die Zusammenhänge zwischen unterschiedlichen Dimensionen (fachspezifisches Wissen und fachspezifische Problemlösefähigkeit) und gegebenenfalls weiteren Subdimensionen zu analysieren, (4) ein Erklärungsmodell für die Ausprägung der bautechnischen Fachkompetenz am Ende der Grundbildung zu generieren und schließlich (5) Effekte der Berufszugehörigkeit (Fliesenleger/ Stuckateure vs. Zimmerer) auf die lernfeldspezifische Kompetenzausprägung zu klären.    weniger

Laufzeit: 01.01.2008 - 31.05.2013

Die Studie „Bewertungskompetenz für das Anwendungsfeld Energie" wurde von der Didaktik der Physik in Kooperation mit der Didaktik der Biologie an der Universität Göttingen realisiert. Untersucht wurde, inwieweit das Göttinger Modell der Bewertungskompetenz (Eggert & Bögeh...    mehr

Die Studie „Bewertungskompetenz für das Anwendungsfeld Energie" wurde von der Didaktik der Physik in Kooperation mit der Didaktik der Biologie an der Universität Göttingen realisiert. Untersucht wurde, inwieweit das Göttinger Modell der Bewertungskompetenz (Eggert & Bögeholz, 2006; Bögeholz, 2011), das bislang schwerpunktmäßig biologierelevante Fragen von Bildung für Nachhaltige Entwicklung (BNE; biodiversitäts- und konsum-relevante „socioscientific issues“) aufgreift, auch auf physikrelevante und interdisziplinär zu lösende Energiefragen zu BNE übertragbar ist. Hierzu wurde ein Test entwickelt, der die Teilkompetenz "Bewerten, Entscheiden und Reflektieren" des Göttinger Modells für die Anwendungskontexte Energiegewinnung, -speicherung und -nutzung aufbereitet.    weniger

Laufzeit: 01.04.2012 - 31.03.2015

Ziel des Projekts CavE-ICT war es, eine stärkere theoretische Verankerung für das Konstrukt ICT-Skills (Informations- und kommunikationstechnologiebezogene Fähigkeiten) zu schaffen und darauf aufbauend einen verhaltensbasierten ICT-Skills-Test für 15-jährige Schülerinnen und ...    mehr

Ziel des Projekts CavE-ICT war es, eine stärkere theoretische Verankerung für das Konstrukt ICT-Skills (Informations- und kommunikationstechnologiebezogene Fähigkeiten) zu schaffen und darauf aufbauend einen verhaltensbasierten ICT-Skills-Test für 15-jährige Schülerinnen und Schüler zu entwickeln und zu erproben. Es wurden 70 simulationsbasierte Items mit dem Autorenwerkzeug CBA ItemBuilder implementiert. Dieser wurde an 766 15-jährigen Schülerinnen und Schülern kalibriert. 64 Items wurden für den endgültigen Itempool des ICT-Skills-Test selektiert, welcher eine Reliabilität von .80 erreicht. Eine verkürzte Version des ICT-Skills Tests, wie auch ein adaptiver Testalgorithmus, wurden erprobt und die Validität der intendierten Testwerteinterpretation wurde untersucht.    weniger

Teilvorhaben Modellierung und adaptive Messung beruflicher Kompetenzen bei Medizinischen Fachangestellten

Laufzeit: 01.12.2011 - 31.05.2015

Das Verbundvorhaben CoSMed zielte auf die Modellierung und Messung beruflicher Kompetenzen Medizinischer Fachangestellter (MFA) und die Generierung komplexer Erklärungsmodelle zum Einfluss individueller und institutioneller Faktoren. Ein besonderer Stellenwert kam auch de...    mehr

Das Verbundvorhaben CoSMed zielte auf die Modellierung und Messung beruflicher Kompetenzen Medizinischer Fachangestellter (MFA) und die Generierung komplexer Erklärungsmodelle zum Einfluss individueller und institutioneller Faktoren. Ein besonderer Stellenwert kam auch der Messung schulischer Kernkompetenzen als bedeutsamen Determinanten beruflicher Fachleistungen zu. In diesem Teilvorhaben wurden ein Domänenmodell und ein Kompetenzmodell ausdifferenziert sowie ein technologiebasiertes Assessment zur Messung von berufsfachlichen Kompetenzen entwickelt. In einem ersten Schritt wurden die beruflichen Anforderungen an die Medizinischen Fachangestellten herausgearbeitet und typische Handlungsabläufe expliziert. Parallel erfolgte die Entwicklung einer webbasierten Unternehmenssimulation, in der möglichst authentische Arbeitsprozesse und Geschäftsprozesse von MFA abgebildet wurden. Für die Niveaumodellierung wurde jede Testaufgabe im Vorfeld multipel klassifiziert, um kognitionspsychologisch begründet Kompetenzstufen unterscheiden zu können. Die Auswertung der Daten der Haupterhebung erfolgte auf der Grundlage probabilistischer Testmodelle und weiterer Analyseverfahren, die die Herausarbeitung von Zusammenhängen zwischen beruflicher Fachkompetenz und individueller Merkmale sowie Kontextbedingungen erlauben. (DIPF/Projektträger)    weniger

Laufzeit: 01.02.2016 - 30.04.2019

Das Anliegen des Projekts „BilWiss-UV“ war es, einen Test zur Erfassung des bildungswissenschaftlichen Wissens zu optimieren und zweitens durch eine Reihe an Validierungsstudien seine Einsatzmöglichkeiten für Forschung und Bildungsmonitoring zu überprüfen. Damit baut ...    mehr

Das Anliegen des Projekts „BilWiss-UV“ war es, einen Test zur Erfassung des bildungswissenschaftlichen Wissens zu optimieren und zweitens durch eine Reihe an Validierungsstudien seine Einsatzmöglichkeiten für Forschung und Bildungsmonitoring zu überprüfen. Damit baut das Vorhaben auf die beiden Vorgängerprojekte „Bildungswissenschaftliches Wissen und der Erwerb professioneller Kompetenz in der Lehramtsausbildung“ (BilWiss; BMBF-Förderkennzeichen 01JH0910) sowie „Die Bedeutung des bildungswissenschaftlichen Hochschulwissens für den Berufseinstieg von Lehrkräften“ (BilWiss-Beruf; BMBF-Förderkennzeichen 01PK11007) auf. In diesen Projekten wurde ein Wissenstest entwickelt, der das bildungswissenschaftliche Wissen von Lehramtsstudierenden und -absolvent(inn)en mit den 6 Dimensionen Unterrichtsgestaltung, Lernen und Entwicklung, Diagnostik und Evaluation, Bildungstheorie, Schule als Bildungsinstitution und Lehrerberuf als Profession erfasst.    weniger