ZIB Education

PISA Plus 2012-2013
Competence development across
an academic year

Lead: TUM

What was the project about?

The study focused on student competence and performance development at two different measurement time points – in the ninth and tenth grade – and thus a longitudinal mapping of development. Beyond the exclusively cross-sectional view of the 2012 PISA study findings at one measurement time point, this extension of the international PISA study was aimed at adding statements on teaching and learning conditions for students in Germany from a longitudinal viewpoint.

In December 2012, all schools that had taken part in PISA 2012 were contacted and invited to participate in another study in spring of 2013 with the same classes that had already been tested the in previous spring. In contrast to the PISA 2012 international assessment, there was no obligation to take part in the longitudinal extension in 2013. Across Germany, 149 schools responded that they were willing to take part in the longitudinal study. A total of around 5500 students participated in PISA Plus.

The execution of the tests and structure of the test booklets were largely based on the PISA 2012 international assessment procedure.

The research focused on the following questions:

  • How do student competences develop across the academic year after the PISA international assessment test?
  • Can differences in their longitudinal development be established in respect of two different definitions and operationalisations of competence?

Some content was added in comparison to the international assessment in order to clarify the second question. So, aside from the PISA exercises, some exercises on educational standards from the IQB national assessment were included.

 

What results did the project produce?

  • In general, the study shows that on average students improved only slightly over the year in the PISA competence areas. Significant improvements were only observed in the case of “Gymnasium” (German high school) students.
  • By contrast, in the competence areas of the educational standards, the students showed a significant improvement in knowledge of maths and science across the academic year.
  • Gender-based differences in student performance in respect of the educational standards were smaller, and there were also improvements at schools other than “Gymnasien”.
  • Gender-based performance differences also remained largely consistent across the year. However, the girls did slightly narrow the boys’ lead in maths. Girls increased their lead over boys in biology with regard to knowledge acquisition within the context of educational standards. However, both genders improved in other scientific subjects and in maths, where the boys are in the lead.

PISA Plus consists of various individual studies. Besides the Centre for International Student Assessment (ZIB), the Institute for Educational Quality Improvement (IQB), which also conducts the national assessments, Leuphana University of Lüneburg and the International Association for the Evaluation of Educational Achievement (IEA) were also involved. 

 

Publications on this project:

Special edition of Zeitschrift für Erziehungswissenschaften

  • Reiss, K., Klieme, E., Köller, O., & Stanat, P. (Hrsg.). (2017). PISA Plus 2012-2013: Kompetenzentwicklung im Verlauf eines Schuljahres (Zeitschrift für Erziehungswissenschaft - Sonderheft, Band 33). Wiesbaden: Springer VS.

Individual contributions

  • Ehmke, T., Köller, O. & Stanat, P. (2017). Äquivalenz der Erfassung mathematischer Kompetenzen in PISA 2012 und im IQB-Ländervergleich 2012. In: Reiss, K., Klieme, E., Köller, O. & Stanat, P. (Eds.). PISA Plus 2012 – 2013 (Zeitschrift für Erziehungswissenschaften – special edition 33), DOI: 10.1007/s11618-017-0751-5. Wiesbaden: Springer VS.
  • Ehmke, T., Sälzer, C., Pietsch, M., Drechsel, B. & Müller, K. (2017). Kompetenzentwicklung im Schuljahr nach PISA 2012: Effekte von Klassenwiederholungen. In: Reiss, K., Klieme, E., Köller, O. & Stanat, P. (Eds.). PISA Plus 2012 – 2013 (Zeitschrift für Erziehungswissenschaften – special edition 33), DOI: 10.1007/s11618-017-0752-4. Wiesbaden: Springer VS.
  • Hahnel, C., Goldhammer, F., Kröhne, U., Schiepe-Tiska, A., Lüdtke, O. & Nagy, G. (2017). Der Einfluss kognitiver Basisfertigkeiten auf die Änderung der in PISA gemessenen Lesekompetenz. In: Reiss, K., Klieme, E., Köller, O. & Stanat, P. (Eds.). PISA Plus 2012 – 2013 (Zeitschrift für Erziehungswissenschaften – special edition 33), DOI: 10.1007/s11618-017-0748-0. Wiesbaden: Springer VS.
  • Heine, J.-H., Nagy, G., Meinck, S., Zühlke, O. & Mang, J. (2017). Empirische Grundlage, Stichprobenausfall und Adjustierung im PISA-Längsschnitt 2012-2013. In: Reiss, K., Klieme, E., Köller, O. & Stanat, P. (Eds.), PISA Plus 2012 – 2013 (Zeitschrift für Erziehungswissenschaften – special edition 33), DOI: 10.1007/s11618-017-0756-0. Wiesbaden: Springer VS.
  • Kiemer, K., Haag, N., Mülller, K. & Ehmke, T. (2017). Einfluss sozialer und zuwanderungsbezogener Disparitäten, sowie der Klassenkomposition auf die Veränderung der mathematischen Kompetenz von der neunten zur zehnten Klassenstufe. In: Reiss, K., Klieme, E., Köller O. & Stanat P. (Eds.), PISA Plus 2012 – 2013 (Zeitschrift für Erziehungswissenschaften – special edition 33), DOI: 10.1007/s11618-017-0753-3. Wiesbaden: Springer VS.
  • Kuger, S., Klieme, E., Lüdtke, O., Schiepe-Tiska, A. & Reiss, K. (2017). Mathematikunterricht und Schülerleistung in der Sekundarstufe: Zur Validität von Schülerbefragungen in Schulleistungsstudien. In: Reiss, K., Klieme, E., Köller, O. & Stanat, P. (Eds.). PISA Plus 2012 – 2013 (Zeitschrift für Erziehungswissenschaften – special edition 33), DOI: 10.1007/s11618-017-0750-6. Wiesbaden: Springer VS.
  • Lehner, M. C., Heine, J.-H., Sälzer, C., Reiss, K., Haag, N. & Heinze, A. (2017). Veränderungen der mathematischen Kompetenz von der 9. zur 10. Klassenstufe. In: Reiss, K., Klieme, E., Köller, O. & Stanat, P. (Eds.). PISA Plus 2012 – 2013 (Zeitschrift für Erziehungswissenschaften – special edition 33), DOI: 10.1007/s11618-017-0746-2. Wiesbaden: Springer VS.
  • Nagy, G., Haag, N., Lüdtke, O. & Köller, O. (2017). Längsschnittskalierung der Tests zur Überprüfung des Erreichens der Bildungsstandards der Sekundarstufe I im PISA-Längsschnitt 2012/2013. In: Reiss, K., Klieme, E., Köller, O. & Stanat, P. (Eds.). PISA Plus 2012 – 2013 (Zeitschrift für Erziehungswissenschaften – special edition 33), DOI: 10.1007/s11618-017-0755-1. Wiesbaden: Springer VS.
  • Nagy, G., Lüdtke, O., Heine, J.-H. & Köller, O. (2017). IRT-Skalierung der Tests im PISA-Längsschnitt 2012/2013: Auswirkungen von Testkontexteffekten auf die Zuwachsschätzung. In: Reiss, K., Klieme, E., Köller, O. & Stanat, P. (Eds.). PISA Plus 2012 – 2013 (Zeitschrift für Erziehungswissenschaften – special edition 33), DOI: 10.1007/s11618-017-0749-z. Wiesbaden: Springer VS.
  • Nagy, G., Retelsdorf, J., Goldhammer, F., Schiepe-Tiska, A. & Lüdtke, O. (2017). Veränderungen der Lesekompetenz von der 9. zur 10. Klasse: Differenzielle Entwicklungen in Abhängigkeit der Schulform, des Geschlechts und des soziodemografischen Hintergrunds? In: Reiss, K., Klieme, E., Köller, O. & Stanat, P. (Eds.). PISA Plus 2012 – 2013 (Zeitschrift für Erziehungswissenschaften – special edition 33), DOI: 10.1007/s11618-017-0747-1. Wiesbaden: Springer VS.
  • Schiepe-Tiska, A., Rönnebeck, S., Heitmann, P., Schöps, K., Prenzel, M. & Nagy, G. (2017). Die Veränderung der naturwissenschaftlichen Kompetenz von der 9. zur 10. Klasse bei PISA und den Bildungsstandards unter Berücksichtigung geschlechts- und schulartspezifischer Unterschiede sowie der Zusammensetzung der Schülerschaft. In: Reiss, K., Klieme, E., Köller, O. & Stanat, P. (Eds.). PISA Plus 2012 – 2013 (Zeitschrift für Erziehungswissenschaften – special edition 33), DOI: 10.1007/s11618-017-0754-2. Wiesbaden: Springer VS.

Contact

089 289 28274 zib.edu@sot.tum.de