Teilvorhaben Adaptives Testen und Psychometrie

Duration: 01.12.2011 - 31.05.2015

Das Verbundvorhaben CoSMed zielte auf die Modellierung und Messung beruflicher Kompetenzen Medizinischer Fachangestellter (MFA) und die Generierung komplexer Erklärungsmodelle zum Einfluss individueller und institutioneller Faktoren ab. Ein besonderer Stellenwert kam auch...    more

Das Verbundvorhaben CoSMed zielte auf die Modellierung und Messung beruflicher Kompetenzen Medizinischer Fachangestellter (MFA) und die Generierung komplexer Erklärungsmodelle zum Einfluss individueller und institutioneller Faktoren ab. Ein besonderer Stellenwert kam auch der Messung schulischer Kernkompetenzen als bedeutsamen Determinanten beruflicher Fachleistungen zu. Durch das Teilvorhaben wurde die Entwicklung und Auswertung von adaptiven Testverfahren gemäß internationalen Standards gesichert. Konkret wurden drei Ziele verfolgt: (1) Die Konstruktion je eines Item Response Theory (IRT)-basierten adaptiven Tests zur Messung mathematischer Kompetenz, naturwissenschaftlicher Kompetenz, Lesekompetenz und selbstregulativer Fähigkeiten; (2) die softwaretechnische Umsetzung der adaptiven Tests und des Hintergrundfragebogens; (3) die Unterstützung und Weiterbildung bei IRT-Skalierungen, statistischen Analysen und der Einsatz der adaptiven Tests. (…) Schwerpunkte [des Teilvorhabens] lagen in der Auswahl von Items, der Präsentation (…), der Computerisierung von Items, der Softwareprogrammierung (Hintergrundfragebogen), der Konstruktion des Booklet-Designs, der Durchführung und Kalibrierung in Thüringen, der Simulation und Erstellung der CAT-Endversion, der Planung und Durchführung der Pilotierung in Thüringen, (…) der Beschreibung des Kompetenzniveaus, der Unterstützung bei CAT-Testungen, der methodischen Unterstützung und Weiterbildung sowie der Dokumentation und Publikation. Für das Teilvorhaben wurden zusätzliche [anwendungsbezogene, psychometrische] Fragestellungen zur methodischen Neuentwicklung und Weiterentwicklung sowie Modifikationen adaptiver Algorithmen (…) untersucht. (DIPF/Projektträger)    less

Duration: 01.11.2007 - 30.06.2014

Im Projekt wurde ein Testinstrument (Kompetenzentwicklungstest) entwickelt, mit dessen Hilfe die Kompetenzentwicklung der Schüler für das Basiskonzept Energie untersucht wurde. Dabei wurde eine Querschnittstudie über die Jahrgänge 6 bis 10 der Sekundarstufe I aus Nordrhei...    more

Im Projekt wurde ein Testinstrument (Kompetenzentwicklungstest) entwickelt, mit dessen Hilfe die Kompetenzentwicklung der Schüler für das Basiskonzept Energie untersucht wurde. Dabei wurde eine Querschnittstudie über die Jahrgänge 6 bis 10 der Sekundarstufe I aus Nordrhein-Westfalen durchgeführt. Des Weiteren wurde ein Teil der Querschnittsstudiengruppe zu einem Längsschnitt ausgeweitet.     less

Kompetenzen, Unterrichtsmerkmale, Schulkontext

Duration: 01.04.1999 - 31.07.2001

Bei der Studie handelte es sich um eine in das Schulqualitätsmanagement des Landes Rheinland-Pfalz eingebettete Evaluationsstudie. Sie umfasste die Erhebung der Leistungen von Schülerinnen und Schülern der 8. Jahrgangsstufe im Fach Mathematik und die Erfassung von unterri...    more

Bei der Studie handelte es sich um eine in das Schulqualitätsmanagement des Landes Rheinland-Pfalz eingebettete Evaluationsstudie. Sie umfasste die Erhebung der Leistungen von Schülerinnen und Schülern der 8. Jahrgangsstufe im Fach Mathematik und die Erfassung von unterrichtsbezogenen und lernbezogenen Merkmalen sowie schulischer und außerschulischer Kontextbedingungen (Schülerfragebogen, Lehrerfragebogen und Schulleiterfragebogen). (IQB)    less

Verbundprojekt

Duration: 01.04.2012 - 31.03.2015

Das Verbundprojekt setzte sich mit der Interaktion zwischen Klassenlehrkräften und neu eingeschulten Kindern im Grundschulkontext auseinander. Dazu wurden schulische wie außerschulische Bedingungen berücksichtigt. Zu den außerschulischen Bedingungen zählten vielfältige individu...    more

Das Verbundprojekt setzte sich mit der Interaktion zwischen Klassenlehrkräften und neu eingeschulten Kindern im Grundschulkontext auseinander. Dazu wurden schulische wie außerschulische Bedingungen berücksichtigt. Zu den außerschulischen Bedingungen zählten vielfältige individuelle Voraussetzungen, etwa die mit der sozialen Herkunft oder einem Zuwanderungshintergrund verbundene typische Ressourcenausstattung der Familien. Im schulischen Bereich richtete sich das Interesse auf die Interaktionen zwischen Kindern und Lehrkräften. Hier waren Aspekte wie Unterrichtsgestaltung, Aufgabenanleitung, Feedback, Beziehungsgestaltung zwischen Kind und Lehrkraft sowie Einschätzungen und Erwartungen der Lehrerschaft bedeutsam. Zur Untersuchung der ablaufenden Prozesse wurde das Unterrichtsgeschehen über eine Abfolge von verschiedenen Erhebungen an 39 Grundschulen in Nordrhein-Westfalen nachgezeichnet. In Bezug auf die Erhebungen lassen sich drei Phasen unterscheiden. In der ersten Phase wurden mit Beginn des ersten Schuljahres telefonische Interviews mit den Eltern durchgeführt. Hierüber ließen sich die familiären Lernvoraussetzungen erfassen. Außerdem wurden fachspezifische Kompetenzen, motivationale Merkmale sowie kognitive Fähigkeiten der Kinder erhoben. Im Zuge dessen wurden auch die Lehrkräfte schriftlich befragt. Im Rahmen der zweiten Phase (Mitte des Schuljahres) wurden ausgewählte Unterrichtsstunden gefilmt. In diesen konnte das Verhalten der Schulkinder und ihre Interaktion mit der Lehrkraft festgehalten werden. Ergänzend kamen in persönlichen Befragungen auch die Kinder zu Wort. Erhoben wurden die Motivation zum schulischen Lernen, das Fähigkeitsselbstkonzept und Wahrnehmungen der Interaktion mit der Lehrkraft. Schließlich wurden in der dritten Phase zum Ende des ersten Schuljahres die Fähigkeiten der Kinder sowie die Einschätzungen und Erwartungen der Lehrkräfte erneut erfasst. (DIPF/Projekt)    less

Duration: 01.02.2012 - 30.06.2014

Das Projekt ging der Frage nach, welchen Einfluss die Kooperation zwischen Lehrkräften und pädagogischem Personal an Ganztagsgrundschulen auf die Gestaltung von Förderangeboten und die Übergangsempfehlung am Ende der Grundschulzeit hat. Es wurde untersucht, ob durch diese in...    more

Das Projekt ging der Frage nach, welchen Einfluss die Kooperation zwischen Lehrkräften und pädagogischem Personal an Ganztagsgrundschulen auf die Gestaltung von Förderangeboten und die Übergangsempfehlung am Ende der Grundschulzeit hat. Es wurde untersucht, ob durch diese interprofessionelle Kooperation die sekundären Effekte des sozialen Hintergrunds beim Übergang von der Grundschule in die weiterführende Schule verringert werden können und die erteilte Übergangsempfehlung unabhängiger von sozialen Merkmalen wird. Dabei wurde davon ausgegangen, dass die Grundschullehrkräfte durch die Kooperation mit dem weiteren pädagogischen Personal auf mehr und verlässlichere Informationen zurückgreifen können, die sie für die Erstellung der Übergangsempfehlung heranziehen können. (...) Die Annahme war, dass die entwickelten Fördermaßnahmen bei intensiverer Kooperation zwischen Lehrkräften und pädagogischem Personal qualitativ hochwertiger sind und eine ganzheitliche Perspektive auf die Entwicklung der Schülerinnen und Schüler gewährleisten. Zur Erreichung des Projektziels wurde anhand der Daten der Zusammenhang zwischen dem Leistungsstand der Schüler und der erteilten Übergangsempfehlung am Ende der Grundschule für die offenen Ganztagsgrundschulen ermittelt. Es wurden quantitative und qualitative Studien durchgeführt, mit denen die Kooperation von Lehrkräften und weiterem pädagogischen Personal an den Ganztagsgrundschulen erfasst wurde. Dabei wurde der Frage nachgegangen, ob durch die Kooperation zwischen Lehrkräften und pädagogischem Personal der Zusammenhang zwischen dem Leistungsstand der Kinder und der gegebenen Übergangsempfehlung enger ist. (...) Zu den Erhebungsmethoden zählten Befragungen und Tests der Schüler, Befragungen der Lehrkräfte, der Eltern und weiteren pädagogischen Personals inklusive Schulleitung sowie Leitfadeninterviews mit Lehrkräften und pädagogischem Personal an Best Practice-Schulen. (DIPF/Projektträger)    less

Duration: 2011 - 2013

Obwohl die berufliche Fachkompetenz in allen gängigen konzeptuellen Kompetenzstrukturmodellen der beruflichen Bildung als zentrale Facette und notwendige Bedingung zur erfolgreichen Bewältigung beruflicher Anforderungen charakterisiert wird, stehen in weiten Teilen beruflic...    more

Obwohl die berufliche Fachkompetenz in allen gängigen konzeptuellen Kompetenzstrukturmodellen der beruflichen Bildung als zentrale Facette und notwendige Bedingung zur erfolgreichen Bewältigung beruflicher Anforderungen charakterisiert wird, stehen in weiten Teilen beruflicher Domänen keine adäquaten und empirisch validierten Kompetenzmodelle zur Verfügung. Im gewerblich-technischen Bereich konnten für die kraftfahrzeug- und elektrotechnische Grundbildung durch die Forschergruppe um Nickolaus bereits erste Befunde zur Kompetenzmodellierung vorgelegt werden; für die bautechnische Grundbildung (erstes Ausbildungsjahr für die Berufe der Bauwirtschaft) steht die kompetenzdiagnostische Forschung hingegen noch am Anfang. Ziel des vorliegenden Projekts ist es, bestehende Lücken zu schließen und (1) ein auf der Basis probabilistischer Testtheorie geprüftes Instrument zur Erfassung der bautechnischen Fachkompetenz bereitzustellen, das die beruflichen Anforderungsstrukturen der Grundbildung Bautechnik adäquat abbildet, (2) ein Niveau- und Strukturmodell der bautechnischen Fachkompetenz zu entwickeln bzw. zu überprüfen, um Aussagen über die erreichten Kompetenzstände sowie die Dimensionalität der Fachkompetenz zu gewinnen,(3)die Zusammenhänge zwischen unterschiedlichen Dimensionen (fachspezifisches Wissen und fachspezifische Problemlösefähigkeit) und gegebenenfalls weiteren Subdimensionen zu analysieren, (4) ein Erklärungsmodell für die Ausprägung der bautechnischen Fachkompetenz am Ende der Grundbildung zu generieren und schließlich (5) Effekte der Berufszugehörigkeit (Fliesenleger/ Stuckateure vs. Zimmerer) auf die lernfeldspezifische Kompetenzausprägung zu klären.    less

Duration: 01.01.2008 - 31.05.2013

Die Studie „Bewertungskompetenz für das Anwendungsfeld Energie" wurde von der Didaktik der Physik in Kooperation mit der Didaktik der Biologie an der Universität Göttingen realisiert. Untersucht wurde, inwieweit das Göttinger Modell der Bewertungskompetenz (Eggert & Bögeh...    more

Die Studie „Bewertungskompetenz für das Anwendungsfeld Energie" wurde von der Didaktik der Physik in Kooperation mit der Didaktik der Biologie an der Universität Göttingen realisiert. Untersucht wurde, inwieweit das Göttinger Modell der Bewertungskompetenz (Eggert & Bögeholz, 2006; Bögeholz, 2011), das bislang schwerpunktmäßig biologierelevante Fragen von Bildung für Nachhaltige Entwicklung (BNE; biodiversitäts- und konsum-relevante „socioscientific issues“) aufgreift, auch auf physikrelevante und interdisziplinär zu lösende Energiefragen zu BNE übertragbar ist. Hierzu wurde ein Test entwickelt, der die Teilkompetenz "Bewerten, Entscheiden und Reflektieren" des Göttinger Modells für die Anwendungskontexte Energiegewinnung, -speicherung und -nutzung aufbereitet.    less

Duration: 01.04.2012 - 31.03.2015

Ziel des Projekts CavE-ICT war es, eine stärkere theoretische Verankerung für das Konstrukt ICT-Skills (Informations- und kommunikationstechnologiebezogene Fähigkeiten) zu schaffen und darauf aufbauend einen verhaltensbasierten ICT-Skills-Test für 15-jährige Schülerinnen und ...    more

Ziel des Projekts CavE-ICT war es, eine stärkere theoretische Verankerung für das Konstrukt ICT-Skills (Informations- und kommunikationstechnologiebezogene Fähigkeiten) zu schaffen und darauf aufbauend einen verhaltensbasierten ICT-Skills-Test für 15-jährige Schülerinnen und Schüler zu entwickeln und zu erproben. Es wurden 70 simulationsbasierte Items mit dem Autorenwerkzeug CBA ItemBuilder implementiert. Dieser wurde an 766 15-jährigen Schülerinnen und Schülern kalibriert. 64 Items wurden für den endgültigen Itempool des ICT-Skills-Test selektiert, welcher eine Reliabilität von .80 erreicht. Eine verkürzte Version des ICT-Skills Tests, wie auch ein adaptiver Testalgorithmus, wurden erprobt und die Validität der intendierten Testwerteinterpretation wurde untersucht.    less

Teilvorhaben Modellierung und adaptive Messung beruflicher Kompetenzen bei Medizinischen Fachangestellten

Duration: 01.12.2011 - 31.05.2015

Das Verbundvorhaben CoSMed zielte auf die Modellierung und Messung beruflicher Kompetenzen Medizinischer Fachangestellter (MFA) und die Generierung komplexer Erklärungsmodelle zum Einfluss individueller und institutioneller Faktoren. Ein besonderer Stellenwert kam auch de...    more

Das Verbundvorhaben CoSMed zielte auf die Modellierung und Messung beruflicher Kompetenzen Medizinischer Fachangestellter (MFA) und die Generierung komplexer Erklärungsmodelle zum Einfluss individueller und institutioneller Faktoren. Ein besonderer Stellenwert kam auch der Messung schulischer Kernkompetenzen als bedeutsamen Determinanten beruflicher Fachleistungen zu. In diesem Teilvorhaben wurden ein Domänenmodell und ein Kompetenzmodell ausdifferenziert sowie ein technologiebasiertes Assessment zur Messung von berufsfachlichen Kompetenzen entwickelt. In einem ersten Schritt wurden die beruflichen Anforderungen an die Medizinischen Fachangestellten herausgearbeitet und typische Handlungsabläufe expliziert. Parallel erfolgte die Entwicklung einer webbasierten Unternehmenssimulation, in der möglichst authentische Arbeitsprozesse und Geschäftsprozesse von MFA abgebildet wurden. Für die Niveaumodellierung wurde jede Testaufgabe im Vorfeld multipel klassifiziert, um kognitionspsychologisch begründet Kompetenzstufen unterscheiden zu können. Die Auswertung der Daten der Haupterhebung erfolgte auf der Grundlage probabilistischer Testmodelle und weiterer Analyseverfahren, die die Herausarbeitung von Zusammenhängen zwischen beruflicher Fachkompetenz und individueller Merkmale sowie Kontextbedingungen erlauben. (DIPF/Projektträger)    less

Duration: 01.01.2000 - 31.12.2004

Die PISA-Studie erfasst seit 2000 weltweit Schülerleistungen und vergleicht diese international. Initiator des Programms ist die OECD (Organisation für wirtschaftliche Zusammenarbeit und Entwicklung). Die Studie wird jeweils im Abstand von drei Jahren durchgeführt und u...    more

Die PISA-Studie erfasst seit 2000 weltweit Schülerleistungen und vergleicht diese international. Initiator des Programms ist die OECD (Organisation für wirtschaftliche Zusammenarbeit und Entwicklung). Die Studie wird jeweils im Abstand von drei Jahren durchgeführt und untersucht dabei die Leistungen von 15-jährigen Schülerinnen und Schülern in den Bereichen Lesen, Mathematik und Naturwissenschaften. In jedem Durchgang wird der Schwerpunkt auf einen dieser drei Kompetenzbereiche gelegt. Darüber hinaus werden bereichsübergreifende Basiskompetenzen ("cross-curricular competencies"), die für methodisches, selbstreguliertes und kooperatives Lernen bzw. Arbeiten notwendig sind sowie zentrale motivationale Kennwerte erfasst. Die Ergebnisse werden unter Berücksichtigung soziodemographischer Merkmale von Schülern und Schulen sowie der Lerngelegenheiten und Instruktionsprozesse in Schulen interpretiert. Der inhaltliche Schwerpunkt der PISA-Studie 2003 lag auf der Erfassung der mathematischen Kompetenz, daneben getestet wurden auch Leistungen in den Bereichen Leseverständnis und Naturwissenschaften. In Deutschland wurde zudem die Möglichkeit genutzt, die PISA-Studie durch nationale Erweiterungen auszugestalten (PISA-E). Eine dieser Optionen war die Erweiterung der Stichprobe für den Vergleich der Länder der Bundesrepublik Deutschland. In Deutschland verteilen sich die 15-Jährigen auf mehrere Klassenstufen, aufgrund von Unterschieden beim Einschulungsalter und Klassenwiederholungen. Um Aussagen über das Wissen und Können deutscher Jugendlicher gegen Ende der Pflichtschulzeit treffen zu können, wurden daher in 220 Schulen ganze Klassen der Jahrgangsstufe 9 einbezogen. Insgesamt wurden ca. 40.000 Schüler in die Studie einbezogen. Die Schüler der Jahrgangsstufe 9 wurden nach einem Jahr erneut getestet (PISA-I-Plus). Die Wiederholungstestung fand im Frühjahr 2004 in den 10. Klassen statt. Die Messwiederholung 2004 diente dazu, im Längsschnitt Erklärungsmodelle für Kompetenzentwicklung im Bereich Mathematik zu überprüfen. Ziel der Ergänzungen war es, Ursachen für interindividuelle Leistungsunterschiede und Ansatzpunkte für konstruktive Interventionsmaßnahmen aufzufinden. Weiterhin wurde mit den Ergänzungen gewährleistet, dass Stoffgebiete und Problemstellungen, die in deutschen Schulen gelehrt werden, aber in den internationalen PISA-Tests nur unzureichend repräsentiert waren, getestet wurden. (DIPF/Projekt)    less