Deutsch-Englisch-Schülerleistungen-International (DESI)

Gibt es zur DESI Studie die Reliabilitäten der Kompetenzschätzer?

Leider liegen uns zur DESI-Studie nur die EAP-Reliabilitäten der PVs vor (wir haben mehrere Personen des Datenkonsortiums angefragt, für die WLEs wurden keine Reliabilitäten berechnet und uns liegen keine Daten auf Einzelitemebene vor). Die EAP-Reliabilitäten der PVs zur DESI-Studie finden Sie im Folgenden.

Für die Kompetenzschätzer wurden folgende EAP-Reliabilitäten für den ersten (t1) und zweiten (t2) Messzeitpunkt ermittelt:

- Deutsch Leseverständnis

t1: EAP-Reliabilität = 0.681 (Variablennamen: LK_T1pv1 - LK_T1pv5)

t2: EAP-Reliabilität = 0.631 (Variablennamen: LK_T2pv1 - LK_T2pv1)

- Deutsch Sprachbewusstheit

t1: EAP-Reliabilität = 0.817 (Variablennamen: BD_T1pv1 - BD_T1pv5)

t2: EAP-Reliabilität = 0.752 (Variablennamen: BD_T2pv1 - BD_T2pv5)

- Deutsch Argumentation

t2: EAP-Reliabilität = 0.563 (Variablennamen: KA_pv1 - KA_pv5)

- Deutsch Wortschatz

t2: EAP-Reliabilität = 0.733 (Variablennamen: WS_pv1 - WS_pv5)

- Englisch: C-Test

t1: EAP-Reliabilität = 0.927 (Variablennamen: CT_T1pv1 - CT_T1pv5)

t2: EAP-Reliabilität = 0.868 (Variablennamen: CT_T2pv1 - CT_T2pv5)

- Englisch Hörverstehen

t1: EAP-Reliabilität = 0.699 (Variablennamen: HV_T1pv1 - HV_T1pv5)

t2: EAP-Reliabilität = 0.656 (Variablennamen: HV_T2pv1 - HV_T2pv5)

- Englisch Bewusstheit Grammatik

t2: EAP-Reliabilität = 0.770 (Variablennamen: BEgr_pv1 - BEgr_pv5)

- Englisch Bewusstheit Pragmatik

t1: EAP-Reliabilität = 0.744 (Variablennamen: BEsp_pv1 - BEsp_pv5)

- Englisch Leseverständnis

Für die WLE-Kompetenzschätzer liegen keine Reliabilitätsschätzungen vor.

Sind im DESI-Datensatz Standardfehler für die Kompetenzschätzer enthalten?

Leider liegt uns dazu keine Dokumentation vor.

Was ist bei der Nutzung des Skalenhandbuchs zu beachten?

Bitte beachten Sie, dass das Skalenhandbuch nicht vollständig mit den am FDZ vorliegenden Datensätzen korrespondiert. Es sind nicht alle im Skalenhandbuch dokumentierten Variablen auch in den am FDZ vorliegenden Datensätzen enthalten. Bitte nutzen Sie für einen vollständigen Überblick zu den Datensätzen unsere Variablenübersicht.

Bestimmte Variablen fehlen in dem DESI Datensatz, die in dem Skalenhandbuch dokumentiert werden. Welchen Grund gibt es dafür? Kann ich diese Variablen trotzdem bekommen?

Leider hat das IQB wenige Variablen nicht vom Konsortium erhalten, d. h., sie werden zwar im Skalenhandbuch dokumentiert, liegen aber nicht in den an uns übergebenen Originaldatensätzen vor. Es handelt sich hierbei um die Variablen Fähigkeitsselbstkonzept (global):

sk_e1, sk_e2 [E, T1/T2], sk_d1, sk_d2 [D, T1/T2]; Soziales Selbstkonzept sozsk1, sozsk2; T1LG5901, T1LG5902, T1LG5903, T1LG5904, T1LG5905, T1LG5906,T1LG5907; T2LG4401, T2LG4402, T2LG4403,T2LG4404, T2LG4405, T2LG4406, T2LG4407.

Wie werden Lehrkräfte- und Schüler*innendatensätzen verknüpft?

Die Datensätze der Schüler*innen und Lehrkräfte lassen sich über die Variable „FDZ_idclass“ miteinander verknüpfen. Zur Auswahl von Deutsch- oder Englischklassen können die Variablen „FDZ_dklasse“ (Deutsch) und „FDZ_eklasse“ (Englisch) im Lehrkräftedatensatz genutzt werden, die sich ebenfalls mit der Variable „FDZ_idclass“ im Schüler*innendatensatz verknüpfen lassen.

Wie erfolgt eine Verknüpfung mit den Videodaten der DESI-Studie?

Zusätzlich zu den am FDZ am IQB vorliegenden Kompetenz- und Befragungsdatendaten wurden im Rahmen der DESI-Studie Videoerhebungen eingesetzt. Diese Datensätze (http://doi.org/10.7477/6:1:1) können am Forschungsdatenzentrum (FDZ) Bildung am DIPF beantragt werden und lassen sich mit den Befragungs- und Kompetenzdaten verknüpfen. Bei der Verknüpfung beider Datenquellen gilt folgendes Vorgehen:

- Datennutzende beantragen die Videodaten am FDZ Bildung am DIPF zusätzlich zu den Befragungs- und Kompetenzdaten, die am FDZ am IQB verfügbar sind.

- Datennutzende speichern alle in ihren Auswertungen der Videodaten gewonnenen Kennwerte/Variablen als Datensatz (am besten mit einer Klasse pro Zeile).

- Dieser Datensatz (Formate: .csv, .sav (SPSS) oder r.data) wird dem FDZ am IQB übermittelt.

Wir rekodieren in diesem Datensatz die Klassen-IDs korrespondierend zu den Klassen-IDs in den Befragungs- und Kompetenzdaten, so dass beide Datenquellen verknüpft werden können. Eine Anmerkung zu den rekodierten Klassen-IDs in den Videodaten: In den Videodaten tauchen manche Klassen zweimal auf (indiziert durch den Zusatz "-2" am Ende der Video-ID), während im Klassendatensatz, der am FDZ am IQB verfügbar ist, jede FDZ-Klassen-ID nur einmal auftaucht. Bei doppelt vergebenen Klassen-IDs werden im kombinierten Datensatz die Zusätze "_1" und "_2" der FDZ-Klassen-ID hinzugefügt. Wenn der Video-Datensatz mit dem Schüler*innen- bzw. Klassendatensatz verknüpft werden soll, müssen diese Zusätze entfernen und die Klassen-ID als numerische Variable definiert werden. Detaillierte Informationen zu den DESI-Videodaten finden Sie auf der Homepage des FDZ Bildung am DIPF.