陳明選 許曉群 王玉家



摘要:目前教育數據統計分析平臺和工具在學校教學中得到了推廣和應用,但是如何對這些數據進行有效分析并用以改善和優化教學過程仍然存在著很多問題。該研究在揭示問題的基礎上厘清了概念,提出:利用教育測評數據確定學習者的學習起點,設計可量化的學習目標,選擇適合學習者的學習內容,準確評價教學質量,及時進行個性化學習分析與反饋的教學設計優化方案。研究認為:在教學過程中對學生的階段性學習結果數據進行常態化收集與分析,是不斷優化和改進教學的關鍵,測評數據對于教學的支持不僅僅是從診斷性評價走向過程性評價,更重要的可使教學從基于經驗走向基于數據分析的科學安排,使教學設計與實施過程更精準、使教學更有效。
關鍵詞:教育測評;數據分析;教學優化
在教育測評中需要對相應的數據進行收集,在收集數據的過程中研究者們逐漸意識到收集的渠道有限且非結構化數據居多,在保留有用數據的同時要耗費大量的時間,甚至無法及時得到相應的信息反饋,面對這些日益凸顯的問題,一系列幫助教師收集分析數據的教育軟件與平臺應運而生,并得到了大量應用。如閱卷系統就是對常態化教學中學習者平時的練習、測試、考試中的成績數據加以收集儲存和分析,這不僅大大減輕了教師閱卷與統計的工作量,也使個性化的學習測評分析成為可能,因而受到了教師的歡迎。但目前大部分教師并未突破應試教育的思維,往往將教育測評數據作為強化應試教育的工具,而對基于數據分析的教學改進關注不夠。目前關于教育大數據的研究大多停留在宏觀理論層面,較少聚焦現實問題。因此,如何基于教育測評數據進行教學問題診斷與學習分析,如何運用測評數據對教學設計與實施過程進行優化是值得研究的重要問題。
(一)教育測評數據
教育測評是指在一定教育價值觀的指導下,依據確立的教育目標,通過使用一定的技術和方法,對所實施的各種教育活動、教育過程和教育結果進行科學測量判定的過程。教育測評數據是針對教育效果或者針對學生各方面的發展而獲得的數據事實,教育測評就是根據這些數據進行價值判斷的過程。
數據是表示客觀事物未經加工的原始素材,在百度百科中對大數據的定義是無法在一定時間內利用常規的軟件工具進行捕捉處理的巨量數據集合,具有大量(Volume)、高速(Veloeitv)、多樣(Variety)、低價值密度(Value)、真實性(Veracity)的特點。教育大數據是大數據的一個子集,是整個教育活動過程中所產生的以及根據教育需要采集到的一切用于教育發展并可創造巨大潛在價值的數據集合。孫洪濤等進一步將教育大數據分為個體、學校、區域和國家4個層次,以及包含基礎數據、管理數據、教學數據、科研數據、服務數據和輿情數據在內的6種類型。方柏林指出,這種采集維度窄,數據量不大的學習數據更準確地說屬于分析數據(LearningAnalytics),而非大數據,顧小清等則將該類數據定義為“學習經歷(Learning Experience)”數據,并指出每一個學習經歷都應該包含學習者的學習是如何發生的,在何時發生,在何地發生的信息。
在測評中被收集的數據在本研究中被定義為教育測評數據,主要指學生個體層面的學習數據,數據類型主要為學習過程中產生的數據。特別是在中學收集的學習數據主要圍繞測評練習的整體情況與題目的考察情況開展,包括題目的知識點、題型、難度、區分度、學習者的正誤情況、成績、排名等。在教學過程中應用教育測評數據分析軟件或工具,對這些數據進行常態化收集與分析是發揮測評數據價值的關鍵,教師可以及時了解學習者知識的變化情況,進一步指導學習者調整學習步伐,不斷完善和優化教學設計過程。
(二)教育測評數據應用中的問題
目前教育數據統計分析平臺和工具在學校教學中得到了推廣和應用,但是如何對這些數據進行有效的分析和使用仍然存在著如下問題。
1.基于傳統教育思維使用測評數據
教師沒有把大數據的應用看作是教學理念與方法的變革,僅僅是利用大數據統計與分析技術提高教育測評數據收集、統計、評判的效率,減輕教師的工作量。教師并未突破應試教育的思維,把獲取結果數據作為重點,導致數據統計成為強化應試教育的有力工具。
2.重視結果數據輕視對數據的分析
教師在應用教育測評數據時主要關注成績、排名、優秀率、及格率、與年級差距等結果數據,缺少對數據產生的原因,教與學過程的分析,更少有用數據分析來改進優化自己的教學,仍然依賴于經驗教學。另外,教育測評數據分析平臺側重于理科忽略了文科,理科大多為客觀題,非對即錯,技術的實現也相對較為簡易,這就導致文科教師對其接納度不高。從源頭分析,教師的使用意識不強也受此影響。
教育測評數據的分析,不僅從橫向對學生成績等進行了分析,同時也從縱向進行了比對,挖掘了更多的教育信息供教師采用指導教學,但是在實際使用中,教師在沒有經過專業的指導下很難對教育測評數據顯現出來的分析結果有效的進行提取使用,遠遠達不到教育測評數據豐富的利用價值,使其仍處于低效率使用階段。
(一)滿足學生個性化學習需求
教育測評數據的分析可根據每一個學習者學習過程中的測評數據進行有針對性的分析,挖掘隱藏信息,滿足不同層次學生的學習需求,提供個性化的指導,有效的改善了學習好的學生“吃不飽”,學習差的學生“跟不上”的現象,也彌補了部分學校針對學生成績劃分的高低班造成的教育不公平現象,讓學生在一個輕松愉悅的環境中展現自己的個性并尋找到自己的優勢。
(二)利于教師精準診斷教學
在教育領域,教師是學生的領航者,教師對學生熟悉的越徹底越能夠在教學中選擇最適合學生的學習內容,制定最精準的學習目標,做出最客觀的學習評價以及最及時的學習反饋,給予學生個性化指導,最大限度地發展學生的能力。要做到這些的基礎是對學生有精準的教學診斷,教育測評數據的分析是對學生日常作業、測試和考試進行數據收集、儲存、處理、分析等,從學生的成績、排名、知識點掌握程度、與班級(年級)差距以及錯題分布情況等方面進行橫向與縱向比較,挖掘學生的學習狀態,對學生個人以及班級整體情況做出精準診斷,方便教師對教學進行有效的安排與調整。
(三)有助于優化教學設計,提高教學有效性
教育測評數據的收集分析,不僅是學生學習成果的體現,同時也是教師教學效果的體現。對教育測評數據的精準診斷可以檢查出學生存在的不足,同時教師可以反思自己教學中的遺漏點,并根據學生對知識的掌握情況等數據來改善自己的教學設計,調整自己的教學進度。根據教育測評數據提供的信息對教學設計的優化主要體現在學習分析、學習內容、學習目標、學習評價以及學習反饋等方面,在這些環節進行優化,可以有效的提高教師的教學有效性。
(一)當前教學設計與實施中的問題
教學設計是教學的起點,是基于學習分析基礎上對學與教的系統化安排,是影響教學的關鍵要素,現行教學設計與實施過程中主要存在如下問題:
1.學習分析——反觀當下教師對教材的分析幾乎只停留在教材提供的教學內容(即知識點),且已確定授課安排,在學期之初就對整個學期的安排進度有個靜態的規劃。對學生的分析只看重成績排名,缺少對能力的培養。只在乎表層所呈現的學習效果,缺乏對學生內在機理的深度挖掘。
2.學習目標——主要來自于課程標準的要求,寬泛而難以測量。部分教師設計的教學目標存在籠統、模糊難以測評的問題,更多關注在有限的時間內是否能夠將課程教完而不是學生是否已經掌握好。
3.學習內容——按照教材的安排依此授課,缺乏知識點之間的連結。特別是復習階段參考的不是學生實際的學習情況,而是考試注重的知識點(可能學生已經掌握卻需浪費時間再次學習),錯題的講解也是通過批改試卷的印象以及教學經驗來確定內容,缺少對班級的個性化定制。
4.學習評價——注重結果性評價,每一次測驗、作業、考試等都是一次階段性成果的總結,而沒有將其串聯,系統、動態了解學生的學習情況。
5.學習反饋——書面反饋,主要是成績,學生做題對錯的反饋,以班級集體反饋為主,缺乏深度分析。例如什么知識點掌握不足?哪一種解題能力欠缺?……學生僅停留在解題的層面,而沒有了解自己到底差在哪里,無法做到舉一反三。
(二)基于測評數據的教學設計優化
本研究中教育測評數據是借助于“極課”大數據平臺采集的學生平時作業以及測試試卷數據,包括試卷本身所涉及的題干信息、知識點以及學生的答題信息等,利用這些數據對學生進行評價,反饋信息,對教學系統進行優化。例如通過學生個體的成績波動可以及時了解學生的學習狀態并給予關注,通過學生知識點的掌握程度來判斷是否需要對學生進行個性化輔導等。研究數據主要通過掃描儀對試卷的基本信息以及批改痕跡進行掃描輸入,進行記錄統計。在教育測評數據的支持下,教學設計優化是一個迭代循環的過程,以優化學習目標、學習內容、學習評價和學習反饋為主要內容。具體的優化過程體現在以下幾個方面,如圖1所示。
1.精準把握學習起點——學習分析
學習分析一般從兩方面入手:一是教材分析;二是學生分析。在實際教學中,教師很少會對教材進行分析,原因主要集中于兩點:一是覺得沒有必要且浪費時間;二是認為教材已經將要講的內容章節順序等都設計的很好。而對學生的分析也偏于主觀印象以及學習成績。教育測評數據的分析應用則可以將教材中的知識點以及知識點之間的相關關系和學生對知識點的掌握程度采用數據圖表等形象地展示出來,方便教師更深入地了解教材以及學生的認知水平。
(1)教材分析
高凌飚等研究者借鑒英國蘇薩克斯方案、美國休斯頓大學察貝塔等人提出的理科教材分析程序以及噶蘭現代教材研究等方案,結合我國教育本土特征,從教育方針出發設計了教材分析的評估模型,從中可以為研究汲取設計思想。在教育測評數據變為常態化應用時,其對教材分析的動態數據收集提供了更簡便且科學的指導。為了發揮教育測評數據價值教材分析可以設計三步:第一步,對課程規定統一使用的教材進行一般性介紹;第二步,了解教材內容,確定收集靜態資料和動態數據,對教材進行分析;第三步,從不同的維度分析教育測評數據對教材的動態影響,反映出教師的教學效果,如圖2所示。
a.一般性介紹
一般性介紹主要包括兩個方面。一是教材的基本資料,包括教材名稱、出版單位、時間、作者等;二是教材的內容,即主要包含哪些知識(也就是目錄)。
b.靜態資料和動態數據的收集
靜態資料收集是指教材本身所涉及的教學內容、教學目標等,以便從教材的知識體系來確定學生的學習效果,具體應收集的資料包括以下內容:
(a)教材以及各章節由課程標準所確定的學習目標要求
(b)教材的知識體系結構
(c)教材所涉及的學生學習課程應掌握的能力
動態數據收集是指通過學習后學生經過測試、作業、考試等測評形式后所產生的教育測評數據。這些可反映出教材使用情況的動態數據,可以幫助教師做進一步的分析,及時地了解教材中知識的掌握度即班級或學生個體利用知識點去解答題目的正確率(例如:A學生加速度知識點解答題目的正確率是93%,則其知識點掌握度為93%),學生是否達到最低學習目標等。
c.分析維度
在教育測評數據的支撐下,教材分析主要可以從三個維度進行分析,以物理課程為例,包括知識點及其相關性、高考要求的五大物理能力和課程標準確定的學習目標。
知識點及其相關性,包括兩部分內容——知識點和知識點的相關性。其中,在本研究中把知識點劃分為三等級,例如:直線運動一運動的圖像一S-t圖像、V-t圖像;知識點的相關性包括兩方面內容,一是指應教授的順序,即學習某一知識點時必須要先學習其他知識點作為基礎,例如:要學習勻變速直線運動就要先知道勻速直線運動和加速度等知識。二是指在做題時為解答一道試題而要運用多個知識點相配合,此時所利用解題的所有知識點構成的關系。
高考要求的五大物理能力包括理解能力、情境想象與推理能力、分析綜合能力、運用數學工具解決問題的能力以及實驗能力。將每一題所考察的主要能力進行標識,然后通過學生答題的正確率來確定相應能力的掌握度,根據實際情況來補救不同學生缺乏的物理能力,從而達到穩步提升的效果。
(2)學生分析
教育測評數據的分析應用,打破了教師對學生的主觀判斷以及以入學成績或測試成績來一刀切的武斷,為更多的學生提供了展現自我的機會,以及讓教師及時針對學生不足之處進行輔導的個性化教學。學生分析依據教材分析中的分析維度進行描述性分析,如表1所示。
2.精準制定個性水平——學習目標
課程標準確定的學習目標,是參照此階段學生的平均水平進行編制的,幾乎所有學生都能夠達到的最低標準,因此以此設置為學生的最低標準是合乎情理的,在此之上,根據學生實際學習,可利用教育測評數據來為學生個性定制學習目標。教育測評數據的分析應用,改善了傳統課堂無法照顧學習者的學習水平而導致的“吃不飽”“跟不上”的現象,為教師提供了制定個性化學習目標的可能,不再只關注年級排名等表面現象,而是開始注意利用知識點的正確率以及知識點間的承接關系等制定具體的、可實現、可測量以及動態變化的目標,以實現學生知識體系的構建。
(1)利用知識點正確率確定學習目標
以課程標準確定的學習目標為基準,根據知識點與已學前知識點或類似知識點的關系,依照學生已學知識點的正確率來預測該知識點的學習目標,確定學習者所處的位置,如圖3所示。在同一知識點的不斷訓練中逐步修正并提升學習目標,讓學習者有一個穩步提升地過程。
為排除題目難度區分度等差異帶來的偏差,本研究將學生的排名變化列入學習目標的一個操作變量,如圖4所示,當在測試中全體學生普遍沒有達到目標時,可考慮是否是試題難度沒有把握好,而不是學習者沒有掌握好,在這種情況下,以學習者的排名變化來判斷學生的學習目標達成度。
(2)利用多級知識點得分率動態調整學習目標
學習目標對于個人來說是需要不斷進行修正的,當學習者不斷地超越自我,這本身就是不斷的進步,但是若缺少了參照物則會使學習者慢慢失去動力,因此需要給予更高遠的小目標,如下頁圖5所示。比如,學生個人的目標在不斷刷新,則需要挑戰班級的目標,若班級的目標被超越,則需要去戰勝年級的目標,如此一步一個腳印,逐漸完善自我。
其中,個人學習目標指的是根據學生個體的學習情況而制定的應達到的標準;班級學習目標指的是班級所有學生的某一知識點的平均得分率作為班級應達到的標準;年級學習目標指的是年級所有學生某一知識點的評分得分率作為年級應達到的標準;年級個人最高得分率指的是在年級中某一知識點得分率最高的學生的知識點得分率;同類院校最高得分率指的是同類院校中某一知識點年級平均得分率最高的那個院校的得分率作為最高得分率。
3.客觀選取學習重難點——學習內容
(1)講解試題的選擇(訓練)
教育測評數據分析應用中最突出的作用是對試題的分析,不僅有答案和解析,同時還將學生的作答分布情況清楚地展示,很方便地了解錯誤選項人數以及具體人員名單,這可以讓教師及時地對學生有針對性地了解。不僅每一題的知識點羅列清晰,同時該題的班級得分率以及與年級均值的差距都以數據精準測算,方便教師科學地選擇需要講解的題目。而且還設置了高錯題和易錯題等形式,通過數據劃分以不同顏色顯示,更精準的幫助教師選擇學習內容。
講解試題的選擇,需要兩步:首先選取高錯題和易錯題作為課堂講解的內容;其次選擇答題率低于年級均值的試題。
(2)知識點的確定
a.新知識點的教授
依據教材分析理解知識點之間的關系,然后根據其最優的學習先后順序來進行教學,選擇知識點的講授。
b.已學知識點的復習
利用收集的班級學生實際教育測評數據(此處主要利用知識點的得分率)進行分析,按照知識點掌握程度(本學期所有知識點最終的得分率)繪制相應的知識樹,如圖6所示,按照知識點掌握率(分為5個層級)由低到高進行排列,一級為掌握率最低,依此類推五級為掌握率最高。一級的知識點為必須重新重點講解的內容,如果時間充裕可以依此規律進行知識點選擇,從圖6中可以很清楚地觀察到學生在哪些知識點上有欠缺,針對這些知識點教師將優先進行復習鞏固。
4.客觀掌控學習進度——學習評價
教育測評數據的分析應用將學生的每一次作業、測試和考試情況進行分析,將診斷性評價轉為過程性評價,充分利用了教育測評數據的價值,使教師及時掌握學生的學習進度以及所處位置等,據此反思調整自己的教學進度。評價主要從以下幾個方面進行。
(1)是否達到學習目標(學生個人和班級目標)。學生學習后的作業(測試或考試)情況,以知識點的得分率與學習目標進行比較,看是否達到目標。
(2)未達標人員。班級有多少人員沒有達到自己的目標,教師可關注這些學生并針對其進行進一步探索。
3.學習目標的制定
勻變速直線運動公式的基本應用,在學習此知識點的時候,對學生學習目標進行制定。經過教育測評數據的分析,得到以下結果(個人目標為部分學生學習目標)如表4所示。
此知識點的相關知識點包括加速度、速度(速率)、勻速直線運動和V-t圖像,根據與此知識點相關的知識點推測,學生應至少達到的水平應為所有有關知識點的平均得分率,但是這個得分率是不斷變化的,因為在學習新知識的過程中要應用這些已學過的知識,那在做題的過程中若正確率越來越高,對學生的要求也會隨之越來越高,從而使學生呈現一個螺旋上的態勢。學生應達到的標準數據來源于與要學知識點相關的知識點的得分率的平均數,同樣班級應達到的標準也是班級所有學生的相關知識點的得分率的平均數(注:會根據知識點的相關度按照比例進行換算平均)。
4.學習評價
對勻變速直線運動公式的基本應用這一知識點的學習情況進行評價,具體如表5所示。
(1)班級只有5人未達到自己的學習目標,達標率為90.38%,此知識點掌握較好。
(2)未達到標準的學習者有:學生6、學生23、學生34、學生46、學生52,這幾個學生需要進一步了解情況。可查看學生的具體試卷答題情況。
(3)班級總體平均得分率高于年級平均得分率,班級掌握較好,再接再厲。
(4)圖10所示:學生A成績提升20分,但是名次卻下降了一名,說明班級整體分數偏高。
5.學習反饋
(1)班級情況
a.如表6所示:此次作業班級整體處于年級平均水平之上,但還有努力的空間,需要再接再厲。
b.如表7所示:該知識點班級學生答題情況都高于年級均值,唯有第六題班級得分率雖高,卻低于平均水平。
(2)學生個體情況
如表8所示未達標的5位同學錯題的具體分布,這幾位學生需給予書面的反饋,其他學生根據教師實際進行選擇是否給予書面反饋或給予口頭反饋。書面反饋內容主要包括四個方面:錯題解析(錯題題干+答案+解析);與學習目標差距;五大物理能力;學習建議。
具體示例如下:
學生A
a.錯題分析(如圖11所示)
b.學習目標差距
對“勻變速直線運動”知識點的學習,你與應達到的目標97%相差百分之七個百分點,雖然錯誤的題目中涉及的知識點是還未重點學習的勻變速直線運動中位移與時間的關系,而不是重點學習的速度與時間的關系,但是通過知識遷移一樣可進行選擇。從你的做題情況來看,你善于記憶知識,卻忽略了對自己知識遷移能力的開發,而若想達到較好效果的知識遷移,則需要建構自己的知識體系。因此,建議你利用思維導圖等形式對已學知識進行知識的梳理。
c.五大物理能力
本次作業,只考察了理解能力、情景想象與推理能力和運用數學工具解決問題的能力,其中關于運用數學工具解決問題的能力試題占55.6%,其余兩種能力分別占22.2%。從你的做題情況來看,情景想象與推理能力和運用數學工具解決問題的能力均達到熟練的程度,所涉及的題目都回答正確,但是你在理解能力上還存在不足,究其原因可能是知識之間的關系沒有弄清楚,比如勻變速直線運動的位移和時間的關系和速度與時間的關系,這需要你對基礎知識掌握熟練的同時,理清各知識點之間的邏輯關系以及相關關系??偟谋憩F為基礎知識不扎實,建議多去夯實基礎,通過做一些基礎題來鞏固知識。
d.學習建議
你應將自己所學進行關系鏈接,構建自己的知識體系,在這個體現中不斷地豐富擴大,這樣才能達到1+1>2的效果,繼續努力。
(二)教學效果分析
教育測評數據的使用對學生的成績提升具有明顯的效果,通過對教師的訪談發現:教師對教育測評數據分析應用抱有積極的認同感,認為其與傳統教學相比效果還是很顯著的。
1.教師對于教學重難點的權衡更精準
LA教師是一名有十幾年教學經驗的物理教師,他說:“以前教課都是面面俱到,生怕有遺漏的地方,根本不清楚這批學生到底哪些知識掌握較差,只能盡我所能將我認為在考試中會出現的考點列舉給學生,很多知識都是走馬觀花,點到為止。但是使用教育測評數據的分析結果后,可以通過數據對比輕易地知道學生的知識點缺漏情況,有重難點的進行講解節省了很多時間。”LB教師說到:“以前批完試卷只是從批改過程中的印象來判斷哪些題需要重點進行講解,往往以印象最深刻的題來講很難精準分析。而我使用教育測評數據分析軟件后,個體與整體微乎其微的差距,學生對難點重點的掌握情況可以很清楚的顯示出來,學生的移動終端可以顯示個性化的錯題本,有針對性的糾錯作業減少了過多的練習,有效減輕了學生的負擔,提高了學習效率。
2.教師對教學時間的管理更科學
LC教師提到每一次考試、測試等都需要教師對學生的成績進行統計,占用了教師很多時間。“在高三階段每天都有大量的試題要做,以前我都是熬到很晚才能將學生的成績統計好,但常常沒有時間進行成績統計和分析,對學生的情況掌握不是很準確,學生大量重復訓練,既增加了我的負擔,也增加了學生的負擔,教學效果并不明顯?!苯逃郎y評數據分析系統的使用,為我節省了大量的教學工作時間,而且統計出現錯誤的概率為零,可以基于測評數據分析系統來精選試題,合理管理作業批改時間,減少教師的成績統計與分析工作時間,而且可以即時進行年級、班級的縱橫向比較,精確定位個體的成績水平。
LD說:“以前,總是在備課、教學、批改作業……反復循環,想找幾個覺得有問題的學生談一下都沒有太多的時間,總是會忽略一些學生?!边@樣的現象在很多學科中都存在,“教育測評數據分析系統的使用促使我對教學工作時間的安排更合理,可以騰出更多的時間放在學生身上?!?/p>
3.教師的個性化輔導更全面高效
因材施教是教育追求的目標,在實際教學中,很多教師都希望能夠根據學生的自身情況,根據學生實際學習狀況進行個性化輔導與提供個性化反饋,但是在傳統教學中,實現個性化費時費力,教師也根本沒有時間去分析每一個學生的情況然后去設置不同的輔導策略,提供有針對性的反饋,可能會起到一定的教學效果,但是卻讓教師處于疲憊狀態。
LE教師說“在以前,對學生進行輔導要付出很大精力,每天都跟陀螺似的,可是收到的效果卻不是很明顯,有時還起到反效果。但是,用了教育測評數據軟件后,批改完試卷我只需在掃描儀上掃一下,最多兩三分鐘,就可以得到班級的統計數據,特別是系統會及時地提醒我最近哪些學生成績不穩定,可以著重地去輔導某些學生,而不是像無頭蒼蠅一樣?!睆脑L談中可以了解到,教師在對學生進行個性化輔導時,可以根據每一次測試的實際來查看不同學生的情況,著重輔導在此知識點有缺陷的學生,并通過系統了解學生具體的不足之處,有針對性的輔導,達到更好的教學效果。
在教學優化過程中學習分析是教學的起點,基礎打得好,上層建筑才能穩固;學習目標是教學的標度,缺乏目標的努力是盲目的,精準的學習目標能幫助教師調整教學進度,合理安排教學計劃,正確判斷學習效果。促使學生找準位置,確定努力方向;學習內容的選擇能精準定位,輔助教師少走彎路,直達學生弱點,采取有針對性的教學措施;學習評價是對教師教學以及學生付出的肯定,有助于教師進行反思,發現教學中的不足之處;學習反饋,從總結性反饋,走向過程性的及時反饋,讓課后輔導變的有理有據,有的放矢?;诮逃郎y評數據分析的教學優化是一個集教育理念、教學方法、技術應用等綜合運用的系統需要不斷的完善和探索。