北京師范大學(xué)信息科學(xué)學(xué)院99研究生 李葆萍
【摘 要】 網(wǎng)絡(luò)教育系統(tǒng)的各個環(huán)節(jié)呈現(xiàn)出一種松散結(jié)構(gòu),這種狀況對目前的評價方法的開展造成了很大的困難。開發(fā)出一種與網(wǎng)絡(luò)教育環(huán)境相適應(yīng)的新的評價方式成為必要,INTERNET的出現(xiàn)和普及,為我們帶來了建立網(wǎng)絡(luò)教育評價系統(tǒng)的希望。本文旨在探討利用網(wǎng)絡(luò)環(huán)境開發(fā)出一種新的評價系統(tǒng)——網(wǎng)絡(luò)教育評價系統(tǒng),并對這個系統(tǒng)的主要結(jié)構(gòu)、功能進(jìn)行探討。
【關(guān)鍵詞】 教育評價 網(wǎng)絡(luò)教育評價 教育技術(shù) 形成性評價、診斷性評價
目前的教育評價多采用總結(jié)性評價,僅以學(xué)期結(jié)束時的一次考試或相關(guān)的調(diào)查問卷作為評價學(xué)生、教師、課程等的依據(jù)是不夠的,因?yàn)榻逃且粋€復(fù)雜的大系統(tǒng),應(yīng)該以長期的形成性的評價手段為主來進(jìn)行評價。在評價過程中不斷的給評價的客體指導(dǎo)意見,幫助他們達(dá)到最終期望的目標(biāo)。而這樣的評價方式需要投入大量的人力、物力持續(xù)的跟蹤觀察來收集、統(tǒng)計(jì)相關(guān)信息,這在當(dāng)前的教育環(huán)境下是難以實(shí)現(xiàn),而且這個矛盾會在將來的網(wǎng)絡(luò)教育環(huán)境下更加突出,解決這個問題就需要在評價過程中引進(jìn)新的技術(shù)手段。
同時評價信息的收集是進(jìn)行某項(xiàng)教育評價過程中很重要的組成部分,信息收集的是否完備、正確、有效在很大的程度上影響了評價中方案的確定、指標(biāo)的構(gòu)建、權(quán)重的確立等等,從而影響了評價的質(zhì)量。在目前的教育、教學(xué)環(huán)境下信息的收集多采用測驗(yàn)法、訪談法、問卷法等形式,評價的主體可以方便的接觸到信息源,了解到評價對象(學(xué)生、教師、課程等)的原始背景、平時的狀態(tài)等等,比較快捷、集中的獲得第一手資料。但是在網(wǎng)絡(luò)環(huán)境中,網(wǎng)絡(luò)課程下的學(xué)生、教師輔助人員、以及相關(guān)的管理人員可以分散在各個地方,呈現(xiàn)出一種很松散的教育組織結(jié)構(gòu),如果采用目前常用的調(diào)查方式和信息采集傳遞方式,難度大、成本高、效率低、無法保證收集的信息對評價有效。因此,我們就需要用一種新的信息收集方法和評價標(biāo)準(zhǔn)來彌補(bǔ)當(dāng)前方法的不足,以及與之相適應(yīng)的評價過程中其它環(huán)節(jié)的變化,這就是與網(wǎng)絡(luò)課程、網(wǎng)絡(luò)學(xué)校相適應(yīng)的網(wǎng)絡(luò)評價系統(tǒng)。網(wǎng)絡(luò)以其強(qiáng)大的交互性、廣泛的傳播性、時空的開放性、數(shù)據(jù)收集管理的方便性,個性化的信息交流、以及快捷的數(shù)據(jù)統(tǒng)計(jì)、分析功能,責(zé)無旁貸的走進(jìn)教育評價的技術(shù)領(lǐng)域。
一、網(wǎng)絡(luò)教育評價系統(tǒng)的構(gòu)成
網(wǎng)絡(luò)教育評價系統(tǒng)化分為以下幾個模塊,其結(jié)構(gòu)和主要功能如下圖所示
教育評價系統(tǒng)的結(jié)構(gòu)和功能
圖中實(shí)線的橢圓代表系統(tǒng)中的六個組成模塊,虛線部分表示六個模塊在整個評價過程中的關(guān)系和任務(wù)。從圖中我們不難看出模塊之間的關(guān)系不是各自分離、線性連接的。每個模塊的功能和任務(wù)與其它模塊是交疊在一起的,互相為基礎(chǔ)、互相支撐,構(gòu)成一個完整的評價系統(tǒng)。系統(tǒng)中大橢圓的結(jié)構(gòu)表示,使用系統(tǒng)進(jìn)行評價工作的時候,允許只使用系統(tǒng)中某幾個模塊來進(jìn)行評價工作,如果有些任務(wù)已經(jīng)完成,可以從任務(wù)完成后的模塊開始使用系統(tǒng)。
1、 評價方案設(shè)計(jì)制定模塊
在這個模塊中應(yīng)該明確評價的目的和對象。它定向了整個評價的進(jìn)行。評價人員應(yīng)使用簡潔、明確的文字對評價的目的進(jìn)行說明。 評價者還應(yīng)該在這個模塊中完成相關(guān)評價標(biāo)準(zhǔn)的確定,它規(guī)定出評價什么,不評什么。然后需要收集有關(guān)的信息。在網(wǎng)絡(luò)教育中學(xué)生、教師輔助人員、教學(xué)管理人員散布于各個地方,這種教育分布結(jié)構(gòu)導(dǎo)致有些方法實(shí)現(xiàn)起來很難,如直接觀察法,還有些方法實(shí)現(xiàn)起來費(fèi)時、費(fèi)力,如訪談法、問卷法。但是如果我們能夠充分利用網(wǎng)絡(luò)這種先進(jìn)的工具,就可以彌補(bǔ)這些困難。比如我們可以通過網(wǎng)絡(luò)發(fā)布、提交技術(shù)向參與課程學(xué)習(xí)的老師、學(xué)生、向參與課程開發(fā)的教師和參與教育管理的人員發(fā)放問卷,回收問卷。這比起傳統(tǒng)的郵寄方式快捷、也利于整理。我們可以通過聊天室、同步、異步討論區(qū)進(jìn)行有關(guān)人員的訪談,通過強(qiáng)大的搜索引擎功能快捷的收集相關(guān)文獻(xiàn)。甚至可以在成本可以承受的條件下通過視頻傳輸、可視會議系統(tǒng)等等技術(shù)來完成一些有必要的觀察任務(wù)。這些技術(shù)都可以集成在整個系統(tǒng)中滿足收集信息的需要。 評價方法對整個評價活動來說具有關(guān)鍵性的作用,評價人員可以根據(jù)評價標(biāo)準(zhǔn)和收集的信息進(jìn)行分析和選擇。確定獲取數(shù)據(jù)的途徑、范圍、取樣、采集的時間等等,做出具體的安排。準(zhǔn)備必要的評價工具安排。擬定好評價工作的計(jì)劃、安排好整個評價的全過程。在這里可以使用電子郵件列表和討論區(qū)等技術(shù)在評價人員和專家之間以及相關(guān)人員進(jìn)行聯(lián)系。 2、 評價指標(biāo)體系以及權(quán)重建構(gòu)模塊
評價指標(biāo)體系是評價標(biāo)準(zhǔn)的具體化、行為化,具有可測量性。是整個評價方案的核心部分。在這個模塊中將運(yùn)用前面收集的信息來制定、篩選、到最后確定評價的指標(biāo)體系,計(jì)算出權(quán)重。
這個模塊中,主要完成的就是對評價指標(biāo)體系的分析、建構(gòu),使用相關(guān)的方法,如:特爾非法、關(guān)鍵特征調(diào)查法、層次分析法等。在網(wǎng)絡(luò)計(jì)算機(jī)環(huán)境下交流、統(tǒng)計(jì)的方便性、互不干涉性、以及計(jì)算機(jī)處理數(shù)據(jù)的能力,保證了特爾非法和層次分析法可以得到有效的運(yùn)用。
目前來說對網(wǎng)絡(luò)課程評價的主要方面和評價標(biāo)準(zhǔn)主要有
1) 課程開發(fā)評價標(biāo)準(zhǔn)
在網(wǎng)絡(luò)課程的開發(fā)、設(shè)計(jì)和傳遞過程中,應(yīng)該建立一套最低標(biāo)準(zhǔn)的指導(dǎo)策略
教學(xué)媒體的選擇決定性因素不是目前所具備的設(shè)備條件,而是根據(jù)學(xué)生的學(xué)習(xí)情況和環(huán)境進(jìn)行選擇。
應(yīng)該定期檢查教學(xué)內(nèi)容的制度,以保證教學(xué)內(nèi)容達(dá)到課程設(shè)計(jì)的標(biāo)準(zhǔn)
在課程開發(fā)中充分考慮到學(xué)生的分析能力、綜合能力和自我評價能力的發(fā)展,并把這些內(nèi)容作為課程學(xué)習(xí)要求的重要組成部分。
網(wǎng)絡(luò)教育評價系統(tǒng)的設(shè)計(jì)
北京師范大學(xué)信息科學(xué)學(xué)院99研究生 李葆萍
2) 教學(xué)過程評價標(biāo)準(zhǔn)
教學(xué)過程中應(yīng)該充分重視師生之間和學(xué)習(xí)之間的相互交往,并通過各種途徑和方法來保證和促進(jìn)這種聯(lián)系和交往。
應(yīng)該對學(xué)生完成的作業(yè)以及提出的問題提供及時和建設(shè)性的反饋。
教學(xué)過程中培養(yǎng)學(xué)生的科研能力,其中包括資料的收集、整理和分析能力等。
3) 教師培訓(xùn)評價標(biāo)準(zhǔn)
在網(wǎng)絡(luò)課程開發(fā)過程中,應(yīng)該為教師提供技術(shù)支持并且鼓勵教師適用各種技術(shù)手段題提高教學(xué)質(zhì)量和教學(xué)效率。
為教師提供各種幫助解決教師從傳統(tǒng)教育走向網(wǎng)絡(luò)教育的轉(zhuǎn)變,并對轉(zhuǎn)變過程進(jìn)行評價。 向教師提供技術(shù)材料、和技術(shù)指導(dǎo)、咨詢?nèi)藛T來幫助教師解決適用網(wǎng)絡(luò)過程中出現(xiàn)的各種問題、故障。
4) 學(xué)生學(xué)習(xí)效果評價標(biāo)準(zhǔn)
使用多種評價手段和標(biāo)準(zhǔn),對學(xué)習(xí)效果進(jìn)行多方面的評價。
定期檢查學(xué)生的學(xué)習(xí)情況、保證教學(xué)的有效性、準(zhǔn)確性和實(shí)用性。
評價人員可以參照以上標(biāo)準(zhǔn)、制定評價的指標(biāo)體系。經(jīng)過評價集體修改通過,確定下來本次評價的指標(biāo)體系。
3、 收集評價信息模塊
在這個模塊中主要完成問卷的生成,發(fā)布,提交和數(shù)據(jù)集成。根據(jù)信息論的觀點(diǎn),教育評價實(shí)際上是依據(jù)評價的目的,對評價信息的搜集、處理、分析并做出解釋的過程。所以信息的搜集在教育評價中占有重要地位,它是進(jìn)行科學(xué)評價的奠基工程。沒有評價信息,或者評價信息的缺乏,不真實(shí)就難以進(jìn)行評價、更難以取得合理的評價結(jié)論。 在網(wǎng)絡(luò)教育評價系統(tǒng)下可以方便的根據(jù)評價的目的來編制測驗(yàn)試題、對評價對象進(jìn)行總結(jié)性評價、形成性評價或診斷性評價。而且在網(wǎng)絡(luò)環(huán)境下,有利于編制題庫,進(jìn)行自動組卷,還可以進(jìn)行自適應(yīng)測驗(yàn)。這些在傳統(tǒng)環(huán)境下是難以實(shí)現(xiàn)的。網(wǎng)絡(luò)環(huán)境下的測驗(yàn),便于客觀題的統(tǒng)計(jì),減少評價人員的工作量。也便于收集主觀題的信息。相對于傳統(tǒng)環(huán)境下的測驗(yàn)來說效率很高。 在評價系統(tǒng)中評價人員可以生成問卷,向評價對象發(fā)布,收集。這種方法的優(yōu)點(diǎn)就在于免去傳統(tǒng)方式下的郵寄的時間,費(fèi)用,能提高有效問卷的比例,統(tǒng)計(jì)方便。而且免去很多人為的處理環(huán)節(jié),比較容易獲得真實(shí)的信息。
在系統(tǒng)中評價人員可以通過建立專家郵件列表,訪談對象郵件列表、開辟專門的訪談區(qū)等方法,可以同步或者異步的方式來進(jìn)行對相關(guān)問題的訪談。這就可以打破以往面對面訪談的時間上必須要求同步的限制,可以給進(jìn)行訪談的雙方一些緩沖的余地,而且由于彼此的不直接接觸、匿名的特點(diǎn)不易于在訪談雙方造成緊張、抗拒、隱瞞等等不良情緒的反應(yīng),影響訪談的效果,訪談?wù)呖梢匀?、深入的獲得想要得到的信息。 網(wǎng)絡(luò)教育評價系統(tǒng)中有區(qū)別于傳統(tǒng)評價方法收集信息的優(yōu)點(diǎn)就是可以自動、持續(xù)跟蹤記錄評價對象的狀態(tài),比如對于評價學(xué)生的學(xué)習(xí)情況學(xué)生在系統(tǒng)中的作業(yè)情況、考試成績、發(fā)言的次數(shù)、正確率、學(xué)習(xí)時間等等都可以通過系統(tǒng)數(shù)據(jù)庫記錄下來,為進(jìn)行持續(xù)性的形成性評價提供了條件。
但是系統(tǒng)對于觀察法的實(shí)施相對比較有困難。這是網(wǎng)絡(luò)技術(shù)和成本造成的問題。這將隨著系統(tǒng)、技術(shù)的完善期待有理想的解決方法。
4、 數(shù)據(jù)處理、分析模塊
在這一模塊中主要針對前面收集的信息中獲得數(shù)據(jù),進(jìn)行整理、分析揭示出蘊(yùn)含在數(shù)據(jù)中的問題。這個模塊中要完成大量的數(shù)據(jù)統(tǒng)計(jì)工作。從而使評價人員最終理順數(shù)據(jù)間的分布狀態(tài)、數(shù)據(jù)的特征和變化規(guī)律、數(shù)據(jù)間的關(guān)系。這一模塊的工作現(xiàn)在已經(jīng)有了一個優(yōu)秀的工具來完成,這就SPSS。系統(tǒng)可以集成這個統(tǒng)計(jì)分析工具來完成一系列的數(shù)據(jù)處理分析工作。
5、 得出評價結(jié)論以及報(bào)告模塊
評價結(jié)果的分析與處理是評價活動非常重要的階段,評價結(jié)果是否合理,正確決定了本次評價的作用是否得到發(fā)揮。因此這是慎重對待的一個環(huán)節(jié)。通常來說處理數(shù)量化的指標(biāo)的信息和非數(shù)量化指標(biāo)信息的方法存在不同。
對于數(shù)量化指標(biāo)體系常采用分等級法、極值參照法和標(biāo)準(zhǔn)參照法;對非量化指標(biāo)體系常采用先定性后定量的方式進(jìn)行量化,得出結(jié)論。
在這個模塊中主要完成的任務(wù)有:
對評價對象形成綜合判斷。從總體上對于評價對象作定性、定量的綜合意見。評價對象達(dá)到什么程度,是否符合某項(xiàng)標(biāo)準(zhǔn)等等。
分析診斷。診斷性評價中,還需要對評價的過程進(jìn)行分析,對評價對象的狀態(tài)、優(yōu)缺點(diǎn)等等進(jìn)行系統(tǒng)的診斷,幫助評價對象了解自己的存在的問題,提供改正的意見。
評價評價本身的信度、效度,修改評價方案本身存在的問題。
向有關(guān)方面反饋信息。評價的結(jié)果上報(bào)有關(guān)部門,成為進(jìn)一步進(jìn)行決策或改進(jìn)工作的依據(jù)。向評價對象進(jìn)行反饋,能指出評價對象自身所處的位置、狀態(tài),存在的問題,為他們指明改進(jìn)、前進(jìn)的方向。
6、 建立評價檔案以及信息數(shù)據(jù)查詢模塊
在這個模塊中,主要記錄評價活動的主要完成的信息、步驟、內(nèi)容,建立評價活動的檔案,可供從事類似評價工作的人員參考,改進(jìn)。同時為每一個參加評價的評價對象、評價工作人員建立數(shù)據(jù)庫,記錄他們參與評價活動的種種狀態(tài)、信息和數(shù)據(jù),可以隨時查詢,對于評價活動提供有效的監(jiān)督,保證評價工作的公正、透明。 二、網(wǎng)絡(luò)教育評價系統(tǒng)的優(yōu)勢
利用網(wǎng)絡(luò)服務(wù)器,可以長期、動態(tài)的存儲大量的個人信息、而且所有的數(shù)據(jù)數(shù)字化的形式存儲,有利于進(jìn)行檢索、查找、增加、刪除、計(jì)算、統(tǒng)計(jì)等一系列工作。
參與評價的各方面人員可以在自己最合適的時間參與評價活動,保證信息的有效性和質(zhì)量。
通過系統(tǒng)的交互,減少評價主體和評價客體的直接接觸,避免評價人員對于學(xué)生產(chǎn)生的主觀印象的影響,保證對于每個評價對象一視同仁。
評價信息的個性化和網(wǎng)絡(luò)的開放性并存,有利于針對各個評價對象作出個性化的評價策略,提供個性化的診斷;同時也利于和其它的相關(guān)評價活動之間的信息交流。
評價過程的公開性保證了評價工作的透明性,維護(hù)了評價的公正性。
通過對評價對象的多維度、多方位、多層次的評價,提高評價的信度和效度。
三、網(wǎng)絡(luò)教育評價系統(tǒng)開發(fā)的意義
網(wǎng)絡(luò)教育評價系統(tǒng)不僅可以對網(wǎng)絡(luò)課程的各個環(huán)節(jié)進(jìn)行評價,而且它的優(yōu)勢就在于根據(jù)實(shí)際情況收集各階段、各方面的信息來進(jìn)行形成性評價、總結(jié)性評價以及診斷性評價,彌補(bǔ)了目前同類系統(tǒng)中信息收集不足、很少進(jìn)行形成性評價的不足;隨著系統(tǒng)開發(fā)的完善、應(yīng)用中性能的改善,它的應(yīng)用范圍可以突破教育評價領(lǐng)域的局限,為類似系統(tǒng)的進(jìn)一步研究開發(fā)提供基礎(chǔ)。 參考文獻(xiàn):
1、Scott W.Bonham and Robert J.Beichner.Education Reserch Using Web-Based Assessment Systems.(2000). Journal of Reserch on Computering in Education, Vol 33 No 1
2、John A.Gretes and Michel Green. Improving Undergraduate Learning with Computer-Assisted Assessment(2000). Journal of Reserch on Computering in Education, Vol 33 No 1
3、Tracy Tyree.Assessing With the Net:Using technology to know more about students.http://www.aahe.org/bulloct.htm
4、Assessment Issues.http://phoenix.liu.edu/~it/cwp/003/webct/assess.html
5、David M.Fetterman.Empowerment Evaluation and the Internet:A Synergistic Relationship.CIE Vol 1,No 1
7、Teresa Welsh.An Evaluation of Online Syllabi in the University of Tennessee College of Communications.ALN Magazine Vol 4,Issue 2-December 2000
8、G.R.H.Sanderock and G.shaw.Learner’s Performance and Evaluation of Attitudes Towards Web CourseTools in the Delivery of An Application Sports Science Module.ALN magezine Vol 3 Issue 2-December 1999
9、韓鋒.開創(chuàng)《網(wǎng)絡(luò)評價》選拔創(chuàng)新人才.WTO與中國教育——2000年《二十一世紀(jì)中國教育論壇》資料匯編
10、趙國棟.論遠(yuǎn)程計(jì)算機(jī)網(wǎng)絡(luò)教育評價體系的構(gòu)建. WTO與中國教育——2000年《二十一世紀(jì)中國教育論壇》資料匯編
11、徐連延.鄭楓.高傳善.智能題庫的模糊設(shè)計(jì)與分析.《微型電腦應(yīng)用》2000年16卷6期
12、崔國生.李穎.AHP在教育評價中的應(yīng)用.《遼寧教育學(xué)院學(xué)報(bào)》Vol 16.No 5.Sep 1999
13、侯光文.《教育評價概論》.河北教育出版.1996年12月版
14、瞿葆奎主編.呂達(dá)副選編.陳玉琨著《教育評價學(xué)》人民教育出版社 1999年版
15、王重鳴著.《心理學(xué)研究方法》.人民教育出版社1990年版