大型資料庫國小四年級自然科學習成就評量標準設定結果之效度評估

Validation of the Standard Setting Procedure for a Large Scale 4th Grade Science Assessment

謝進昌(Jin-Chang Hsieh) ； 謝名娟(Ming-Chuan Hsieh) ； 林世華(Sieh-Hwa Lin) ； 林陳涌(Chen-Yung Lin) ； 陳清溪(Chin-Hsi Chen) ； 謝佩蓉(Pei-Jung Hsieh)

《教育科學研究期刊》 56卷1期 (2011/03) Pp. 1-32

摘要

學習成就評量資料庫建置目的之一，在於描述學生於各學科的學習成就表現概況；而學習成就表現的描述，即牽涉到標準設定議題。隨著臺灣學生學習成就評量資料庫對於國小四年級自然科之評量架構調整，致使沿用的表現標準已多不符合實務運用，而興起重新修訂之舉。本研究主要目的在於評估2009年自然科學習成就評量國小四年級標準設定結果之效度，以Kane（1994, 2001）的效度評估證據為依據，藉由效度的過程證據、內部證據以及外部證據，作為標準設定結果之效度證據來源。結果發現，從各項效度證據來看，國小四年級自然科標準設定可由標準設定成員的組成及其回應、設定結果的一致性，以及外推論於數學成就的效度外部證據得到支持。本研究最後提出數項建議，供未來標準設定研究者參考。

關鍵字

效度評估 ； 書籤標定法 ； 標準設定

並列摘要

One of the main purposes for constructing an academic achievement database is to understand the students’ academic performance for each content area. Standard setting is the main issue in the academic achievement. Due to the adjustment of the test blueprint for Taiwan Assessment of Student Achievement 4th grade science, the previous performance level description is outmoded for practice. Therefore, modifying the standards is necessary. The purpose of this study is to validate a science standard setting procedure designed for 2009 4th grade science students. Based on Kane’s (1994, 2001) framework for validation, this study collected procedural evidence, internal evidence, as well as external evidence using mathematics academic performance. Several suggestions are provided in the conclusion for further studies.

並列關鍵字

validation ； Bookmark method ； standard setting

參考文獻

杜佳真、林世華(2007)。九年一貫課程數學領域能力指標「數與量」、「代數」主題軸第一、二階段表現標準適切性評估之研究。師大學報：教育類。52(1)，63-85。

吳宜芳、鄒慧英、林娟如(2010)。標準設定效度驗證之探究：以大型數學學習成就評量為例。測驗學刊。57(1)，1-27。

侯佩君、杜素豪、廖培珊、洪永泰、章英華(2008)。台灣鄉鎮市區類型之研究：台灣社會變遷基本調查第五期計畫之抽樣分層效果分析。調查研究：方法與應用。23，7-32。

吳毓瑩、陳彥名、張郁雯、陳淑惠、何東憲、林俊吉(2009)。以常態混組模型討論書籤標準設定法對英語聽讀基本能力標準設定有效性之幅合證據。教育心理學報。41(1)，69-90。

()。