Teilvorhaben Adaptives Testen und Psychometrie

Duration: 01.12.2011 - 31.05.2015

Das Verbundvorhaben CoSMed zielte auf die Modellierung und Messung beruflicher Kompetenzen Medizinischer Fachangestellter (MFA) und die Generierung komplexer Erklärungsmodelle zum Einfluss individueller und institutioneller Faktoren ab. Ein besonderer Stellenwert kam auch...    more

Das Verbundvorhaben CoSMed zielte auf die Modellierung und Messung beruflicher Kompetenzen Medizinischer Fachangestellter (MFA) und die Generierung komplexer Erklärungsmodelle zum Einfluss individueller und institutioneller Faktoren ab. Ein besonderer Stellenwert kam auch der Messung schulischer Kernkompetenzen als bedeutsamen Determinanten beruflicher Fachleistungen zu. Durch das Teilvorhaben wurde die Entwicklung und Auswertung von adaptiven Testverfahren gemäß internationalen Standards gesichert. Konkret wurden drei Ziele verfolgt: (1) Die Konstruktion je eines Item Response Theory (IRT)-basierten adaptiven Tests zur Messung mathematischer Kompetenz, naturwissenschaftlicher Kompetenz, Lesekompetenz und selbstregulativer Fähigkeiten; (2) die softwaretechnische Umsetzung der adaptiven Tests und des Hintergrundfragebogens; (3) die Unterstützung und Weiterbildung bei IRT-Skalierungen, statistischen Analysen und der Einsatz der adaptiven Tests. (…) Schwerpunkte [des Teilvorhabens] lagen in der Auswahl von Items, der Präsentation (…), der Computerisierung von Items, der Softwareprogrammierung (Hintergrundfragebogen), der Konstruktion des Booklet-Designs, der Durchführung und Kalibrierung in Thüringen, der Simulation und Erstellung der CAT-Endversion, der Planung und Durchführung der Pilotierung in Thüringen, (…) der Beschreibung des Kompetenzniveaus, der Unterstützung bei CAT-Testungen, der methodischen Unterstützung und Weiterbildung sowie der Dokumentation und Publikation. Für das Teilvorhaben wurden zusätzliche [anwendungsbezogene, psychometrische] Fragestellungen zur methodischen Neuentwicklung und Weiterentwicklung sowie Modifikationen adaptiver Algorithmen (…) untersucht. (DIPF/Projektträger)    less

Teilvorhaben Modellierung und adaptive Messung beruflicher Kompetenzen bei Medizinischen Fachangestellten

Duration: 01.12.2011 - 31.05.2015

Das Verbundvorhaben CoSMed zielte auf die Modellierung und Messung beruflicher Kompetenzen Medizinischer Fachangestellter (MFA) und die Generierung komplexer Erklärungsmodelle zum Einfluss individueller und institutioneller Faktoren. Ein besonderer Stellenwert kam auch de...    more

Das Verbundvorhaben CoSMed zielte auf die Modellierung und Messung beruflicher Kompetenzen Medizinischer Fachangestellter (MFA) und die Generierung komplexer Erklärungsmodelle zum Einfluss individueller und institutioneller Faktoren. Ein besonderer Stellenwert kam auch der Messung schulischer Kernkompetenzen als bedeutsamen Determinanten beruflicher Fachleistungen zu. In diesem Teilvorhaben wurden ein Domänenmodell und ein Kompetenzmodell ausdifferenziert sowie ein technologiebasiertes Assessment zur Messung von berufsfachlichen Kompetenzen entwickelt. In einem ersten Schritt wurden die beruflichen Anforderungen an die Medizinischen Fachangestellten herausgearbeitet und typische Handlungsabläufe expliziert. Parallel erfolgte die Entwicklung einer webbasierten Unternehmenssimulation, in der möglichst authentische Arbeitsprozesse und Geschäftsprozesse von MFA abgebildet wurden. Für die Niveaumodellierung wurde jede Testaufgabe im Vorfeld multipel klassifiziert, um kognitionspsychologisch begründet Kompetenzstufen unterscheiden zu können. Die Auswertung der Daten der Haupterhebung erfolgte auf der Grundlage probabilistischer Testmodelle und weiterer Analyseverfahren, die die Herausarbeitung von Zusammenhängen zwischen beruflicher Fachkompetenz und individueller Merkmale sowie Kontextbedingungen erlauben. (DIPF/Projektträger)    less

Kompetenzen, Unterrichtsmerkmale, Schulkontext

Duration: 01.04.1999 - 31.07.2001

Bei der Studie handelte es sich um eine in das Schulqualitätsmanagement des Landes Rheinland-Pfalz eingebettete Evaluationsstudie. Sie umfasste die Erhebung der Leistungen von Schülerinnen und Schülern der 8. Jahrgangsstufe im Fach Mathematik und die Erfassung von unterri...    more

Bei der Studie handelte es sich um eine in das Schulqualitätsmanagement des Landes Rheinland-Pfalz eingebettete Evaluationsstudie. Sie umfasste die Erhebung der Leistungen von Schülerinnen und Schülern der 8. Jahrgangsstufe im Fach Mathematik und die Erfassung von unterrichtsbezogenen und lernbezogenen Merkmalen sowie schulischer und außerschulischer Kontextbedingungen (Schülerfragebogen, Lehrerfragebogen und Schulleiterfragebogen). (IQB)    less

Mit Durchführung des Programme for International Student Assessment (PISA) 2015 liegen die Ergebnisse aus der sechsten Erhebungsrunde vor, bei der diesmal die Naturwissenschaften im Mittelpunkt standen. Der zweite Zyklus der Studie (2000-2006, 2009-2015) ist damit abges...    more

Mit Durchführung des Programme for International Student Assessment (PISA) 2015 liegen die Ergebnisse aus der sechsten Erhebungsrunde vor, bei der diesmal die Naturwissenschaften im Mittelpunkt standen. Der zweite Zyklus der Studie (2000-2006, 2009-2015) ist damit abgeschlossen, so dass jede der drei untersuchten Grundbildungsdomänen Lesen, Mathematik und Naturwissenschaften zweimal den inhaltlichen Schwerpunkt bildete. Die fünfzehnjährigen Schüler bearbeiteten Aufgaben aus den Bereichen Naturwissenschaften, Mathematik, Lesen und kollaboratives Problemlösen sowie einen Fragebogen zum demographischen Hintergrund und dem Unterrichts- und Schulgeschehen. Befragt wurden außerdem die Schulleitungen, Lehrkräfte und Eltern. Auf nationaler Seite wurde die Untersuchung von einer Arbeitsgruppe am Zentrum für internationale Bildungsvergleichsstudien (ZIB e. V.) unter Leitung von Prof. Dr. Kristina Reiss an der School of Education der Technischen Universität München (TUM) durchgeführt. Die wichtigste Änderung für die Testteilnehmenden bestand in der Umstellung auf computerbasiertes Testen. Außerdem wurde in PISA 2015 ein verfeinertes Modell zur Skalierung der Daten verwendet, welches neben der Schwierigkeit der Testaufgaben und der Fähigkeit der Jugendlichen auch das Potenzial von Testaufgaben berücksichtigt, tatsächlich kompetente von weniger kompetenten Schülern zu unterscheiden. (IQB/Projekt)    less

Duration: 2000 - 2007

Das DFG-Projekt wurde gemeinsam vom Deutschen Institut für Internationale Pädagogische Forschung und dem Pädagogischen Institut der Universität Zürich durchgeführt und untersuchte Kontextmerkmale, Bedingungsmerkmale und Prozessmerkmale von Unterricht und deren Bedeutung für d...    more

Das DFG-Projekt wurde gemeinsam vom Deutschen Institut für Internationale Pädagogische Forschung und dem Pädagogischen Institut der Universität Zürich durchgeführt und untersuchte Kontextmerkmale, Bedingungsmerkmale und Prozessmerkmale von Unterricht und deren Bedeutung für die Entwicklung von Schülerinnen und Schülern. Innerhalb der Gesamtlaufzeit gliederte sich das Projekt in drei Phasen. In der ersten Phase wurde eine repräsentative Befragung mit Lehrkräften in Deutschland und der Schweiz durchgeführt, um Gemeinsamkeiten und Unterschiede in den unterrichtsbezogenen, selbstbezogenen und schulumweltbezogenen Kognitionen der Lehrkräfte zu ermitteln und Kontextbedingungen von Unterricht in beiden Ländern zu erfassen. In der zweiten Projektphase stand die videobasierte Erfassung zweier Unterrichtsmodule in zwanzig deutschen Klassen der 9. Jahrgangsstufe und in zwanzig Schweizer Klassen der 8. Jahrgangsstufe im Mittelpunkt. In einer dritten Projektphase wurden schließlich die im Rahmen der ersten beiden Teilstudien gewonnenen Befunde in den schulischen Alltag zurückgeführt, indem eine videogestützte und internetbasierte Fortbildung mit einem Teil der an der Videostudie beteiligten Lehrpersonen durchgeführt wurde. (DIPF/Projekt)    less

ASCOT+

Duration: 01.05.2019 - 31.12.2022

Das Projekt TeKoP hatte zum Ziel, Prüfungspersonal und Lehrkräfte für die Ausbildungsberufe Industriekaufleute und Kaufleute für Büromanagement mit einem Training in die Lage zu versetzen, selbst kompetenzorientierte und technologiebasierte Prüfungsaufgaben zu erstellen. ...    more

Das Projekt TeKoP hatte zum Ziel, Prüfungspersonal und Lehrkräfte für die Ausbildungsberufe Industriekaufleute und Kaufleute für Büromanagement mit einem Training in die Lage zu versetzen, selbst kompetenzorientierte und technologiebasierte Prüfungsaufgaben zu erstellen. Die Teilnehmenden wurden geschult, kompetenzorientierte und technologiebasierte Prüfungsaufgaben für Industriekaufleute zu erstellen und die Qualität der Aufgaben anhand von Gütekriterien zu überprüfen. Weiterhin wurde untersucht, ob die Teilnehmenden kompetenzorientierte und technologiebasierte Prüfungsaufgaben auch für den Beruf Kaufleute für Büromanagement erstellen können. Die entwickelten Aufgaben für beide Berufe wurden bei Auszubildenden erprobt und hinsichtlich ihrer diagnostischen Güte beurteilt. Im Detail: Gegenstand der Erprobungsstudie war die Evaluation von problemlösekompetenzorientierten und technologiebasierten Aufgaben für die zwei kaufmännische Ausbildungsberufe Industriekaufleute und Kaufleute für Büromanagement. Das vorrangige Ziel lag neben der Prüfung der Aufgaben in der Itemparameterschätzung (Rasch-Modellierung). Neben der Aufgabenbearbeitung wurden weitere Daten (u. a. zur Sozioökonomie, zur Ausbildung, zu bestehenden Kompetenzen) über einen Fragebogen erhoben. Die Erhebungen wurden mit Berufsschulklassen an kaufmännischen Schulen verschiedener Standorte in Deutschland durchgeführt. Gegenstand der Trainingsstudie war die Evaluation des zuvor entwickelten Trainings zur Förderung der problemlösekompetenzorientierten und technologiebasierten Aufgabenerstellung für berufliches/berufsschulisches Ausbildungspersonal. Das Ziel der Erhebung lag in der Bewertung der Wirksamkeit des eingesetzten Trainings auf den Wissens- und Kompetenzzuwachs im Verlauf des Trainings. Im Rahmen der Erhebung wurden Daten zur Sozioökonomie, zur Erfahrungen mit / der Einstellung zu Lernmanagementsystemen, zur Trainingserwartung, zu einem Wissenstest zur problemhaltigen Aufgabenmerkmalen und Gütekriterien, zur Selbsteinschätzung der Medienkompetenz sowie weitere Daten (u. a. Technologieaffinität und Teilnehmerreaktion) erhoben. (Projekt/IQB)    less

Duration: 01.01.2000 - 31.12.2004

Die PISA-Studie erfasst seit 2000 weltweit Schülerleistungen und vergleicht diese international. Initiator des Programms ist die OECD (Organisation für wirtschaftliche Zusammenarbeit und Entwicklung). Die Studie wird jeweils im Abstand von drei Jahren durchgeführt und u...    more

Die PISA-Studie erfasst seit 2000 weltweit Schülerleistungen und vergleicht diese international. Initiator des Programms ist die OECD (Organisation für wirtschaftliche Zusammenarbeit und Entwicklung). Die Studie wird jeweils im Abstand von drei Jahren durchgeführt und untersucht dabei die Leistungen von 15-jährigen Schülerinnen und Schülern in den Bereichen Lesen, Mathematik und Naturwissenschaften. In jedem Durchgang wird der Schwerpunkt auf einen dieser drei Kompetenzbereiche gelegt. Darüber hinaus werden bereichsübergreifende Basiskompetenzen ("cross-curricular competencies"), die für methodisches, selbstreguliertes und kooperatives Lernen bzw. Arbeiten notwendig sind sowie zentrale motivationale Kennwerte erfasst. Die Ergebnisse werden unter Berücksichtigung soziodemographischer Merkmale von Schülern und Schulen sowie der Lerngelegenheiten und Instruktionsprozesse in Schulen interpretiert. Der inhaltliche Schwerpunkt der PISA-Studie 2003 lag auf der Erfassung der mathematischen Kompetenz, daneben getestet wurden auch Leistungen in den Bereichen Leseverständnis und Naturwissenschaften. In Deutschland wurde zudem die Möglichkeit genutzt, die PISA-Studie durch nationale Erweiterungen auszugestalten (PISA-E). Eine dieser Optionen war die Erweiterung der Stichprobe für den Vergleich der Länder der Bundesrepublik Deutschland. In Deutschland verteilen sich die 15-Jährigen auf mehrere Klassenstufen, aufgrund von Unterschieden beim Einschulungsalter und Klassenwiederholungen. Um Aussagen über das Wissen und Können deutscher Jugendlicher gegen Ende der Pflichtschulzeit treffen zu können, wurden daher in 220 Schulen ganze Klassen der Jahrgangsstufe 9 einbezogen. Insgesamt wurden ca. 40.000 Schüler in die Studie einbezogen. Die Schüler der Jahrgangsstufe 9 wurden nach einem Jahr erneut getestet (PISA-I-Plus). Die Wiederholungstestung fand im Frühjahr 2004 in den 10. Klassen statt. Die Messwiederholung 2004 diente dazu, im Längsschnitt Erklärungsmodelle für Kompetenzentwicklung im Bereich Mathematik zu überprüfen. Ziel der Ergänzungen war es, Ursachen für interindividuelle Leistungsunterschiede und Ansatzpunkte für konstruktive Interventionsmaßnahmen aufzufinden. Weiterhin wurde mit den Ergänzungen gewährleistet, dass Stoffgebiete und Problemstellungen, die in deutschen Schulen gelehrt werden, aber in den internationalen PISA-Tests nur unzureichend repräsentiert waren, getestet wurden. (DIPF/Projekt)    less