English (E8) Standards Tests
The Standards Tests are a first step towards a permanent large-scale secondary-level system-monitoring programme commissioned by the Austrian Ministry of Education, Science and Culture. The aim of this programme is diagnosis, not selection. Currently, the target group are pupils in grade 8 in grammar schools [Allgemeinbildende Höhere Schulen (AHS)] and secondary schools [Allgemeinbildende Pflichtschulen (APS), i.e. former Hauptschulen].
In May 2006 a sample of approximately 8,000 pupils in 90 pilot schools from all over Austria were tested in the receptive skills of Reading and Listening. In May 2007, about 6,000 pupils were tested in Reading and Listening, and 500 of these pupils were also tested in the productive skill of Writing. In May 2008 the Speakingtest completed the E8 Standards Tests.
The E8 tests have been developed at LTC by a team of experts working with a group of item writers, who are all practicing teachers teaching pupils at grade 8 in AHS and APS. LTC has been responsible for item screening, archiving, pilot testing including item analysis, test construction and analysis of the results for the entire population, as well as communicating relevant aspects of the results to different groups of stakeholders (test takers, teachers, school principals, teacher trainers, educational authorities, and the ministry).
In May 2009 a baseline study was conducted in the course of which 10 percent of all Austrian pupils in grade 8 were tested in Reading and Listening, and a certain percentage of these in Writing and Speaking as well. The psychometric analysis of the E8 baseline study will be done by LTC.
In the future the E8 Standards Tests will take place every three years.
project title:
Construct Identification of E8 baseline Writing
A study of the relationship between the incidence of error types and IRT-derived human ratings on an analytic rating scale.
keywords: writing test validation, error analysis
project lead: Günther Sigott
period: 01.01.2016 – 31.12.2017
project title:
E8 Baseline-Studie
Unter Fortführung des Projekts ‘E8 Standardstesting’ besteht dieses Projekt in der wissenschaftlichen Leitung der 2009 bundesweit stattfindenden Baseline-Testing Englisch 8. Schulstufe in Zusammenarbeit mit BIFIE Salzburg. Das Projekt umfasst Validierungsuntersuchungen zu den Bereichen Hörverstehen, Leseverstehen und schriftliche Produktion, Entwicklung von Rating-Plänen für die Bereiche schriftliche und mündliche Produktion, psychometrische Analyse der Daten (N = 11 000) mittels dichotomem Raschmodell und Rasch-Multifacettenmodell sowie Rückmeldung der Resultate an die vom Auftraggeber (BIFIE Salzburg) definierten Adressatengruppen.
Schlagworte: Sprachtestforschung
Leitung: Günther Sigott
Zeitraum: 01.01.2009 – 30.11.2010
project title:
E8 Standardstesting
Im Rahmen der österreichischen Bildungsstandards für die 8. Schulstufe wurde am Sprachtestzentrum der Universität Klagenfurt (LTC) für das Fach Englisch ein diagnostisches Testsystem für Hörverstehen, Leseverstehen, sowie für schriftliche und mündliche Produktion entwickelt. Dies umfasst die Definition der Testkonstrukte, Festlegung von Testformaten, Item-entwicklung, Prompt-entwicklung, Konzeption von Assessoren-schulungen, Pilottestungen mit ca. 7000 SchülerInnen in über 100 Schulen, Itemanalysen nach klassischer sowie nach probabilistische Testtheorie, Aufbau einer kalibrierten Itembank, Standardsetting mit Bezug auf dem gemeinsamen Europäischen Referenzrahmen für Sprachen sowie Konzeption und Realisierung eines internetbasierten Rückmeldesystems für verschiedene Berichtsebenen bis zur Individualebene (SchülerIn).
Schlagworte: Sprachtestwissenschaft, Sprachtestforschung
Leitung: Günther Sigott
Zeitraum: 01.10.2007 – 30.09.2009
E8 Standards Tests Specifications
E8 Rating Scales
E8 Validation Reports
Quicklinks
Information for
Address
Universitätsstraße 65-67
9020 Klagenfurt am Wörthersee
Austria
+43 463 2700
uni [at] aau [dot] at
www.aau.at
Campus Plan