Research Forum: Score Reliability and Placement Testing

Page No.: 
71
Writer(s): 
Paul A. Westrick, Kyushu University

This study examines the piloting of a commercially-produced test of English, the Quick Placement Test – Pen and Paper Test (QPT-PPT). In consecutive administrations of two versions of the test with 161 first-year students at a Japanese university, the test results failed to discriminate among students of varying proficiencies. Narrow ranges, low score reliability estimates, and large standard errors of measurement characterized the results. Item analysis revealed that most of the test items did little to separate high and low scoring students. The data also suggests that test anxiety, familiarity with the test format, and test-taking skills were important factors in the test scores.
この研究は、日本の大学生161名に対して行ったQuick Placement Test – Pen and Paper Test (QPT-PPT) という一般英語力テストの結果である。 学生はこの2つのテストを連続して受けた。テスト結果は明確に学生のレベルを分けるものではなかった。得点差があまりなかったのである。信頼性係数は低く、測定の標準誤差が大きかったと言える。項目分析の結果、殆んどの項目は効果がなかった。このデータはまた、学生のテストに対する不安感や、テストフォーマット知識の有無や、テスト慣れをも示唆している。

PDF: