羅志卿 陳思雄



【摘 要】文章基于核心素養探索普通高中信息技術學科學業水平合格性考試質量分析框架主要包括考試情況分析、試題特點分析、學業質量分析、合理性建議四個部分。重點圍繞題型結構、知識結構、能力結構、素養結構、情境素材等五個維度分析試題特點,從必備知識、關鍵能力、學科素養考查等三個角度開展學業質量分析。最后提出深入學校調研、加強學習交流等途徑來完善分析框架。
【關鍵詞】核心素養 質量分析框架 學業水平合格性考試 信息技術
【中圖分類號】G40? ? 【文獻標識碼】A? 【文章編號】1002-3275(2023)22-32-04
高中學業水平合格性考試作為衡量高中畢業生在本學科是否達到合格要求的大規模參照性考試,要依照課程標準的核心素養測評框架開展考試命題和質量分析,實現教、學、評的統一。本研究主要分析高中信息技術學業水平考試試題(以下簡稱學考試題)是否符合《普通高中信息技術課程標準(2017年版2020年修訂)》(以下簡稱課程標準)的要求,考試質量分析是否能有效地引導教學,為各級部門提供決策參考,為改進命題提供依據。通過調研,收集各地市、各學校對當前學考試題質量分析的意見及建議,對比現行評價體系,借鑒先實行合格性考試的省份的質量分析,依照課程標準構建基于核心素養的學業水平合格性考試質量分析框架。
一、信息技術學科核心素養的界定
(一)學科核心素養水平劃分及其表現
課程標準全面凝練了學科核心素養,包括信息意識、計算思維、數字化學習與創新、信息社會責任四個維度。每個維度學科核心素養的水平劃分為預備級、水平1、水平2、水平3四個水平,明確學科核心素養的內涵及表現形式,如信息意識的具體表現為對信息的敏感度及對信息價值的判斷力。
(二)學科核心素養與課程標準的關系
高中信息技術課程目標為全面提升全體高中學生的信息素養,課程標準明確了核心素養的維度、教材編寫的依據、測評的依據。核心素養貫穿于課程標準中的知識內容、學業要求、學業質量水平等部分,核心素養是衡量課程目標、學生信息素養培養達成度的具體依據。
二、現行學業水平合格性考試評價體系分析
在實施新一輪課程改革前,部分省份的學考試題側重基礎知識、基本技能的考查,弱化解決問題能力的考查;注重知識識記、軟件基本操作等單一知識點的考查,缺乏綜合性、開放性、情境性的試題,評分標準單一,未能較好地評價不同層次學生的能力水平。現行學業水平合格性考試評價體系存在一定的不足,主要體現為以下三個方面:
(一)評價體系指標不全面,核心素養未能較好地體現
現行評價體系指標主要為題型結構、知識結構分析,圍繞課程結構、題型題組、知識內容分析,缺少能力結構、情境素材、素養結構分析。評價體系指標不夠全面,未能較好地分析學科核心素養的達成情況。
(二)數據分析縱深度不夠,問題成因分析不夠具體
現行數據分析側重于考生人數、平均分、各等第分數、優秀率、及格率等指標,對相關試題數據分析局限于應答數據的列舉,缺乏橫向和縱向的對比分析,未能較好地利用測量學相關知識開展分析,對問題成因分析不夠具體。
(三)指導性建議不夠明確,引導教學的效果不夠明顯
評價體系指標不全面,對問題及其成因的分析不夠具體,導致對教育行政部門、學校、教師等群體提出的建議不夠明確,未能較好地引起上述主體對考試的重視,引導教學的效果不夠明顯。
三、基于核心素養的學業水平合格性考試質量分析框架的構建
(一)框架構建的原則與依據
基于各級教育行政部門、學校、教師等不同主體對質量分析報告的需求,本著科學性、實用性、指導性、可操作性等原則,依照課程標準中核心素養測評框架的測評依據、測評試題的關鍵維度、核心素養的內涵及表現形式等內容,構建基于核心素養的學業水平合格性考試質量分析框架。
(二)核心素養在考試質量分析框架中的地位與作用
課程評價的目標主要包括判斷學生的信息技術學科核心素養等級水平,引導信息技術課程教學轉向發展學生的學科核心素養,提升信息技術課程的學習效果。核心素養貫穿于教學、測評的整個過程,測評圍繞知識內容、情境、學業質量水平而命題,其目的是檢測學生核心素養的水平。為此,試題評價必須圍繞核心素養而開展,圍繞核心素養構建質量分析框架,分析學生是否具備相關學科核心素養,是否達成課程目標。[1]
(三)基于核心素養的考試質量分析框架的具體構成
綜合分析現行學業水平合格性考試評價體系的不足,在開展充分調查研究的基礎上,依照課程標準核心素養測評框架的要求,探索基于核心素養的普通高中學業水平合格性考試質量分析框架,主要包括考試情況分析、試題特點分析、學業質量分析、合理性建議等內容。
1.考試情況分析
考試情況分析應該包括考生人數、考生分數、考試相關指標等。考生人數的基本分析包括報考人數、實考人數、缺考人數、合格人數等數據;考生分數的基本分析包括平均分、眾數、中位數、下四分位數、上四分位數、最高分、最高分人數、最低分、最低分人數、滿分人數、0分人數、合格分人數等;考試相關指標的基本分析包括試卷的試題難度、標準差、信度、效度等。省級質量分析一般要呈現省級、市級、縣級、學校等區域的數據以及對比數據,通常以表格或者圖形等方式呈現。數據的對比分析既要對各區域的數據進行橫向比較,分析出各區域學業質量的差異,又要對近年考試數據進行縱向對比,分析出數據變化的規律及其原因。
2.試題特點分析
學考試題注重對學生基本知識技能和問題解決能力的考查,試題的關鍵維度包括學科素養、情境、知識等。試題特點分析將從題型結構、知識結構、能力結構、情境素材、素養結構五個方面進行,并將這五個方面作為一級分類,每個一級分類再細分為若干個二級分類。例如將題型結構的一級分類項目分為選擇題、非選擇題兩個二級分類,分析字段主要有題號、滿分、滿分人數、平均分、得分率、難度、區分度、標準差等。為能夠更直觀地呈現統計數據,可以制訂統一的分析表,對一級、二級分類項目進行相關數據統計,如表1所示。
第一,題型結構分析。當前大部分省份學考試題筆試時間為60分鐘,試題滿分為100分,各省的題型有所不同,如某省學考試題的題型分為單項選擇題、非選擇題兩大類,單項選擇題分值為70分,非選擇題分值為30分。
基于數據統計表統計出相關數據,通過與樣題對比,分析題型、小題數、均分、難度等是否與樣題一致,區分度、標準差是否符合要求。
第二,知識結構分析。學考試題注重全面考查學生學習的廣度和知識覆蓋面,通過開展知識結構分析來檢驗試題所考查的知識覆蓋面,圍繞各內容主題對應的知識內容及其認知水平展開分析。將必修1、必修2的內容按照主題進行分類,分為數據與信息、數據處理與應用、算法與程序實現、信息社會特征、信息系統組成與應用、信息安全與責任等6個主題內容。參照表1制訂分析表,統計各主題內容試題的分值及占比,對比分析試題中各主題內容與課程標準各主題內容的知識點占比的一致性,對比分析各主題內容的得分率、難度等相關數據。
在對知識內容進行分析的基礎上,對各知識內容的認知水平進行分析,包括了解、理解、運用三個認知水平層次。分析各主題內容、整卷對應的認知水平層次的分值占比與課程標準的一致性,如是否存在理解層次試題比例偏高、應用層次試題比例偏低的情況。
第三,能力結構分析。學考試題主要考查學生的信息素養和在信息化環境下的學習能力,包括基本知識、基本技能、解決問題的能力三項學科能力。分類統計出各部分試題對應的能力結構,參照表1制訂分析表,統計各能力結構模塊對應的相關數據,分析各能力結構對應的試題、分值及占比。對試題各能力結構的數據進行客觀分析,開展合理評價,進一步通過應答數據分析考生的能力水平,引導教師重視對信息技術基本知識、技能的教學,注重學生解決問題能力的培養。
第四,情境素材分析。學考試題的情境素材主要包括個人、公共、學科、人文等四個層面,為此將個人、公共、學科、人文作為情境素材分析的二級分類。首先厘清情境素材分類的內涵和實例,逐一分類統計各小題對應的情境素材類型。其次參照表1制訂分析表,統計各情境素材結構模塊對應的相關數據,分析各情境素材對應的試題、分值、占比等數據。最后針對得分率較低的試題,要深入分析其情境素材與試題的難易程度是否一致,即簡單素材對應容易題,一般素材對應中等難度題,復雜素材對應較難題。還要分析試題的情境是否聯系學生日常生活,是否能有效地引導考生應答。
第五,素養結構分析。學考試題主要體現信息技術學科核心素養,將四個核心素養維度作為分析的二級分類,明確學科核心素養水平劃分的內涵與表現形式,理解各素養水平劃分與描述。對照試題對應的知識、能力、情境考查的分析,參照素養水平劃分與描述,分類統計各小題對應的核心素養維度及水平。參照表1制訂分析表,統計各維度核心素養的相關數據,分析試題所考查的學科核心素養是否全面,四個素養維度對應的分值是否懸殊,同一素養維度的水平層次是否存在傾斜某個水平而忽略其他水平的考查。
3.學業質量分析
為更好地引導教學,應該根據應答數據開展必備知識、關鍵能力、學科素養考查的學業質量分析。學業質量分析包含基本情況分析、典型試題分析,必備知識、關鍵能力、學科素養考查的學業質量分析的結構、方法基本一致,現以必備知識考查的學業質量分析為例進行具體說明。
第一,基本情況分析。確定分類模塊的一級分類、二級分類,制訂對應試題得分統計表。為更好地分析各層次學生的學業質量水平,本文根據考生分數分布情況,參照等級性考試的劃分標準,將考生的得分率劃分為1~5檔,統計各知識主題內容對應的題組的相關數據,分析各知識主題內容的得分情況,如某省學考試題必備知識對應題組及得分統計表(見表2)。
從表2數據可以看出,該省學生在數據處理與應用、信息社會特征、信息系統組成與應用模塊的得分率較高,在數據與信息、算法與程序實現模塊的得分率較低。在分析調研中發現數據與信息的試題偏難,且該省較多學校對算法與程序的教學不夠重視,教學效果不明顯。對此,建議教師要更重視算法與程序的教學,充分利用情境和實例來授課,利用算法與流程圖分析問題,提升課堂效率。另外,命題者應進一步改進命題,降低數據與信息模塊的試題難度。
第二,典型試題分析。此環節應選取2~3道較有代表性的試題進行分析,本文以某省學考試題第3題為例進行說明。
3.錄制一段時長為10秒、量化位數為16位、采樣頻率為50kHz、未經壓縮的單聲道音頻,則該音頻所占的存儲容量約為(? )。
A. 1MB? ?B. 10MB? ?C. 16MB? ?D. 50MB
答案:A
各檔次考生應答數據如表3所示。
選項選答率曲線如圖1所示。
難度曲線圖與區分度曲線圖分別如圖2、圖3所示。
本題考查的知識為數據與信息中的數據編碼的基本方式,內容要求為知道數據編碼的基本方式,認知水平為了解層次,本題的設計難度應為容易題,難度應該在0.80以上。根據考生的應答數據,平均分為0.62分,實測難度為0.31,1檔層次考生的平均得分僅為1.13分,難度為0.57,試題區分度較好。通過分析,大部分學生對數據編碼的基本方式不了解,說明考生的實際水平與課程標準的要求存在較大的差距。
以此類推,完成必備知識2~3道試題的分析,完成關鍵能力、學科素養考查的學業質量分析的基本情況分析、典型試題分析。
4.合理性建議
對考試情況、試題特點、學業質量進行分析后,要對分析過程中發現的問題進行歸納、總結、提煉,找出共性的問題,如某區域學業水平不均衡、某知識模塊得分率較低,等等。針對存在的問題,要通過縱向和橫向的數據對比分析原因,探討解決問題的辦法。一是要向各級教育行政部門提出建議,加強教學指導及質量監控等工作,注重質量分析報告的發布及使用效果等;二是要向學校及教師提出建議,促使學校進一步重視學業水平考試,從學科發展和當前教育教學存在的問題等方面提出解決問題的措施,從更新教學理念、創新教學模式、探索新的教學方法等方面提出建議;三是要向命題團隊提出改進命題的建議,反饋試題存在的不足及改進方法。
四、結論
(一)研究成果的應用與意義
在構建基于核心素養的學業水平合格性考試質量分析框架的基礎上,將其應用于2022年某省信息技術學科學業水平合格性考試質量分析,根據分析框架科學準確、實事求是地展開分析,試題基本符合課程標準及樣卷的要求。通過對比分析,發現教學存在的一些問題,并提出合理性建議,有效引起地方、學校對學業水平合格性考試的重視,在配足配齊專任教師、配備相關設備設施、開足課時的前提下,引導教師改進教學策略,提升教學質量。相關部門根據數據分析,有針對性地對薄弱學校開展實地調研、質量監測等工作。并通過分析試題的亮點和找出部分試題存在的問題,為改善及提升命題質量提供更多依據。
(二)研究的局限與展望
研究雖然取得一定的成效,但是也存在一些問題,需要進一步深入學校調研、加強學習交流,優化及完善質量分析報告。
1.深入學校調研,強化引導教學的功能
針對質量分析發現的問題,應進一步深入實地對相關學校開展辦學歷史、學生來源、教師隊伍、設備設施等方面的調研,找出問題存在的原因,提出解決問題的意見及建議,進一步引起地方、學校、教師對學業水平合格性考試的重視,強化分析報告引導教學的功能。
2.加強學習交流,提升分析報告的質量
為提升分析報告質量和影響力,要進一步加強對課程標準、考試分析評價策略及方法的學習。同時,各地要加強合作交流,各省級考試部門要搭建平臺,定期組織分析團隊與先進行課程改革的省份開展交流活動,學習先進的經驗做法,探討優化的措施和辦法,提升學考試題分析報告的質量及影響力。
【參考文獻】
[1]鐘建業.高中信息技術學業水平合格性考試的實踐研究[J].中國信息技術教育,2019(12):18-20.