肆的研究結果與討論.docVIP

才智在线才智在线旺旺有心成晨QQ754093490主題文章才智在线才智在线旺旺有心成晨QQ754093490PISA科學素養之試題認知成份分析旺旺有心成晨QQ754093490旺旺有心成晨QQ754093490PAGE 20旺旺有心成晨QQ754093490旺旺有心成晨QQ754093490PAGE 19才智在线才智在线旺旺有心成晨QQ754093490旺旺有心成晨QQ754093490旺旺有心成晨QQ754093490 PAGE 1課程與教學季刊 2009, 13(1), 頁1～20PISA科學素養之試題認知成份分析張銘秋* 謝秀月** 徐秋月***認知取向的試題難度分析對教學與評量均有實質上的參考價值，本文整合素養架構與文獻，提出科學素養測驗之試題認知成份架構，描述科學素養測驗的試題難度與認知成份特徵，同時藉由不同國家的試題答對比率的差異討論，提供教學與評量的具體參考資訊。研究中所使用的資料庫是PISA 2006國際評量計畫中施測的103題科學試題。研究中以知識類別的數量、知識層次、科學能力與字數四個成份預測科學素養試題難度，此認知成份模式可預測約52%的臺灣試題難度參數變異。在臺灣表現不佳的試題中，研究者提出不熟悉題型、不會使用題目給定的資料或證據形成推論、無法掌握變因以及無法從圖表中掌握答題的關鍵資訊等四項因素。此四項因素大多是因為學生沒有機會接觸，不熟悉此種類型的試題。因此建議日後教師們可以增強這方面的教學。關鍵字：科學素養、認知成份、國際評量* 作者現職：國立臺南大學測驗統計研究所博士生**作者現職：國立臺南大學材料科學系副教授***作者現職：國立臺南大學測驗統計研究所助理教授壹、緒論一、研究動機(一)認知成份分析在測驗發展的應用傳統上，成就測驗的效度驗證都只集中在內容涵蓋性上，很少將焦點置於構念效度之上（Enright, Allen, Kim, 1993）。在測驗架構或雙向細目表中包含認知或程序向度是越來越普遍了，雖然測驗架構或雙向細目引導測驗的發展，但它們並未直接接受實徵的驗證。測驗的認知分析是構念效度重要的論述依據之一，這個取向兼顧認知心理學和心理計量的模式（Embretson, 1993; Enright et al., 1993）。針對試題難度所提出的分析模式稱為試題難度模式（Item Difficulty Models, IDM）（Gorin, 2005）。典型的IDM包含一系列解題運作歷程所涉及的認知處理或技能。IDM的重要性在於確認試題處理的相關特徴，初步的試題特徴經常藉由內容領域相關文獻分析產生，實際運作的難度模式通常需要不斷反覆修正。藉由IDM將這些認知成份區辨出來就可以直接進行教學。除此之外也可協助區辨現有架構與試題的缺點，提供不同形式試題與不同測驗間比較的基礎，對系統性的發展測驗頗有助益。再者，也可以協助測驗發展者在試題發展過程中，藉由操弄這些會影響試題難度的特徵，來估計試題的難度，因此不需要對每個試題都進行預試，既可節省成本，也可針對受試者的能力來配對試題難度。且透過這樣的分析也可以將非預期的試題難度揭露出來（是否有無關構念）（Dimitrov Raykov, 2003; Enright et al., 1993; Rosca, 2004）。(二)PISA科學素養的內涵與趨勢PISA國際評量計畫（The Programme for International Student Assessment, 簡稱PISA）是由經濟合作暨發展組織（Organisation for Economic Co-operation and Development，簡稱OECD）所委託的評量計畫。PISA測驗所評量的是十五歲學生分別在閱讀、數學、科學領域的素養成就，目的在於了解這些即將完成義務教育的學生，是否已經準備妥當成為具有良好素養，且能積極貢獻社會的良好公民。PISA測驗的主要內涵並不在於鑑別學生是否有效地記憶已知的學科知識，而在於評量他們是否能夠把這些知識有效地應用，並且從不同角度分析與解決問題，應用於進入社會後所面臨的各種情境及挑戰，由此可見其重要性。臺灣在2006年的科學素養表現雖名列世界第四（林煥祥、劉盛忠、林素微、李暉，2008），但部分試題表現顯著低於世界一、二的芬蘭與香港，是急需加強之處。目前試題難度來源的研究多是針對數學（丁振豐，1997；劉子鍵、林世華、梁仁楷，1998；林世華、葉嘉惠，1999；Embretson Gorin, 2001; Graf, Peterson, Steffen, Lawless, 2005; Katz, Lipps, Trafton, 2002）或閱讀理解測驗（Breland, Lee, Najarian, Muraki, 2004; Go