PISA 科学素养之试题认知成份分析 徐秋月.PDFVIP

課程與教學季刊 2009, 13(1),頁 xx 1～xx20 PISA 科學素養之試題認知成份分析 * ** *** 張銘秋 謝秀月 徐秋月 認知取向的試題難度分析對教學與評量均有實質上的參考價值，本文整合 素養架構與文獻，提出科學素養測驗之試題認知成份架構，描述科學素養測驗 的試題難度與認知成份特徵，同時藉由不同國家的試題答對比率的差異討論， 提供教學與評量的具體參考資訊。研究中所使用的資料庫是PISA 2006 國際評 量計畫中施測的 103 題科學試題。研究中以知識類別的數量、知識層次、科學 能力與字數四個成份預測科學素養試題難度，此認知成份模式可預測約52%的 臺灣試題難度參數變異。在臺灣表現不佳的試題中，研究者提出不熟悉題型、 不會使用題目給定的資料或證據形成推論、無法掌握變因以及無法從圖表中掌 握答題的關鍵資訊等四項因素。此四項因素大多是因為學生沒有機會接觸，不 熟悉此種類型的試題。因此建議日後教師們可以增強這方面的教學。 關鍵字：科學素養、認知成份、國際評量 * 作者現職 ：國立臺南大學測驗統計研究所博士生 **作者現職 ：國立臺南大學材料科學系副教授 ***作者現職 ：國立臺南大學測驗統計研究所助理教授 1 主題文章 壹、緒論 一、研究動機 (一)認知成份分析在測驗發展的應用 傳統上，成就測驗的效度驗證都只集中在內容涵蓋性上，很少將焦點置於 構念效度之上（Enright, Allen, Kim, 1993 ）。在測驗架構或雙向細目表中包含 認知或程序向度是越來越普遍了，雖然測驗架構或雙向細目引導測驗的發展， 但它們並未直接接受實徵的驗證。測驗的認知分析是構念效度重要的論述依據 之一，這個取向兼顧認知心理學和心理計量的模式（Embretson, 1993; Enright et al., 1993 ）。針對試題難度所提出的分析模式稱為試題難度模式（Item Difficulty Models, IDM ）（Gorin, 2005 ）。典型的IDM 包含一系列解題運作歷程所涉及的 認知處理或技能。IDM 的重要性在於確認試題處理的相關特徴，初步的試題特 徴經常藉由內容領域相關文獻分析產生，實際運作的難度模式通常需要不斷反 覆修正。 藉由IDM 將這些認知成份區辨出來就可以直接進行教學。除此之外也可協 助區辨現有架構與試題的缺點，提供不同形式試題與不同測驗間比較的基礎， 對系統性的發展測驗頗有助益。再者，也可以協助測驗發展者在試題發展過程 中，藉由操弄這些會影響試題難度的特徵，來估計試題的難度，因此不需要對 每個試題都進行預試，既可節省成本，也可針對受試者的能力來配對試題難度。 且透過這樣的分析也可以將非預期的試題難度揭露出來（是否有無關構念） （Dimitrov Raykov, 2003; Enright et al., 1993; Rosca, 2004 ）。 (二)PISA 科學素養的內涵與趨勢 PISA 國際評量計畫（The Programme for International Student Assessment, 簡 稱PISA ）是由經濟合作暨發展組織（Organisation for Economic Co-operation and Development ，簡稱OECD ）所委託的評量計畫。PISA 測驗所評量的是十五歲 學生分別在閱讀、數學、科學領域的素養成就，目的在於了解這些即將完成義 務教育的學生 ，是否已經準備妥當成為具有良好素養 ，且能積極貢獻社會的良 好公民。 PISA 測驗的主要內涵並不在於鑑別學生是否有效地記憶已知的學科知 識，而在於評量他們是否能夠把這些知識有效地應用，並且從不同角度分析與 解決問題，應用於進入社會後所面臨的各種情境及挑戰，由此可見其重要性。 臺灣在2006 年的科學素養表現雖名列世界第四（林煥祥、劉盛忠、林素微、李 暉，2008 ），但部分試題表現顯著低於世界一、二的芬蘭與香港，是急需加強之 2 PISA科學素養之試題認知成份分析 處。 目