段崇江 張建偉 王學(xué)優(yōu) 滕霞
清華大學(xué)電教中心、現(xiàn)代教育技術(shù)研究所,北京 100084
摘要:本文圍繞針對(duì)整個(gè)網(wǎng)絡(luò)課程的評(píng)價(jià)標(biāo)準(zhǔn)、針對(duì)網(wǎng)絡(luò)教育資源的評(píng)價(jià)標(biāo)準(zhǔn)和針對(duì)網(wǎng)絡(luò)課程某些具體側(cè)面的評(píng)價(jià)標(biāo)準(zhǔn)等三個(gè)主題綜述了國(guó)內(nèi)外網(wǎng)絡(luò)課程評(píng)價(jià)的標(biāo)準(zhǔn)和研究,從評(píng)價(jià)內(nèi)容和評(píng)價(jià)方法上對(duì)這些標(biāo)準(zhǔn)行了分析。
關(guān)鍵詞:網(wǎng)絡(luò)課程,評(píng)價(jià),標(biāo)準(zhǔn),網(wǎng)絡(luò)教育
網(wǎng)絡(luò)教育是當(dāng)前新一代遠(yuǎn)程教育發(fā)展的趨勢(shì),同時(shí)也日益廣泛地應(yīng)用在了校園內(nèi)的教育中,是教育領(lǐng)域中的熱點(diǎn)。在網(wǎng)絡(luò)教育快速發(fā)展的同時(shí),其質(zhì)量保證問(wèn)題引起了越來(lái)越多的關(guān)注。網(wǎng)絡(luò)課程的質(zhì)量是制約整個(gè)網(wǎng)絡(luò)教育質(zhì)量的一個(gè)關(guān)鍵環(huán)節(jié)。網(wǎng)絡(luò)課程的評(píng)價(jià)標(biāo)準(zhǔn)問(wèn)題是當(dāng)前網(wǎng)絡(luò)教育發(fā)展中必須盡快解決的一個(gè)重要問(wèn)題。我國(guó)教育部于2001年6月成立了“現(xiàn)代遠(yuǎn)程教育技術(shù)標(biāo)準(zhǔn)化委員會(huì)”,后改名為“教育信息化技術(shù)標(biāo)準(zhǔn)委員會(huì)”,(CELTS),啟動(dòng)了系列研究項(xiàng)目,我們承擔(dān)了其中CELTS-22 “課程資源評(píng)價(jià)標(biāo)準(zhǔn)”的研制工作。在此過(guò)程中,我們對(duì)國(guó)內(nèi)外有關(guān)的網(wǎng)絡(luò)課程資源評(píng)價(jià)標(biāo)準(zhǔn)進(jìn)行了文獻(xiàn)調(diào)研和綜合分析。
國(guó)內(nèi)外對(duì)于網(wǎng)絡(luò)課程的評(píng)價(jià)進(jìn)行了許多研究,有一些機(jī)構(gòu)制定了網(wǎng)絡(luò)課程評(píng)價(jià)的相關(guān)標(biāo)準(zhǔn)。在這些評(píng)價(jià)標(biāo)準(zhǔn)中,有些是針對(duì)整個(gè)網(wǎng)絡(luò)課程的質(zhì)量的評(píng)價(jià)標(biāo)準(zhǔn),有些是針對(duì)多媒體網(wǎng)絡(luò)教育資源的評(píng)價(jià)標(biāo)準(zhǔn),有些則是針對(duì)網(wǎng)絡(luò)課程某些具體側(cè)面(如界面設(shè)計(jì))的評(píng)價(jià)標(biāo)準(zhǔn)。下面就按照這三個(gè)主題分別加以綜合分析。
一、針對(duì)整個(gè)網(wǎng)絡(luò)課程的評(píng)價(jià)標(biāo)準(zhǔn)
當(dāng)前,在針對(duì)整個(gè)網(wǎng)絡(luò)課程層次上的評(píng)價(jià)標(biāo)準(zhǔn)中,有兩個(gè)標(biāo)準(zhǔn)在國(guó)際上產(chǎn)生了較大影響,它們是美國(guó)培訓(xùn)與發(fā)展協(xié)會(huì)(American Society of Training and Development,ASTD)的E-Learning課件認(rèn)證標(biāo)準(zhǔn)(The ASTD Institute E-Learning Courseware Certification (ECC) Standards)和美國(guó)國(guó)防部高級(jí)分布式學(xué)習(xí)聯(lián)合實(shí)驗(yàn)室(Advanced Distributed Learning Co-Laboratory, ADL)的網(wǎng)絡(luò)教學(xué)設(shè)計(jì)與評(píng)價(jià)指南(Guidelines for Design and Evaluation of Web-Based Instruction)。這兩個(gè)標(biāo)準(zhǔn)對(duì)于研制我國(guó)的網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)具有較大的參考價(jià)值,因此,這里重點(diǎn)對(duì)它們進(jìn)行對(duì)比分析。
(一)標(biāo)準(zhǔn)背景
ASTD成立于1944年,是美國(guó)關(guān)于學(xué)習(xí)與績(jī)效的專業(yè)協(xié)會(huì)。ASTD所開展的E-Learning課件認(rèn)證的對(duì)象是異步網(wǎng)絡(luò)課程和多媒體課件,它的目標(biāo)是:
l 為能夠滿足培訓(xùn)者需求的E-Learning課程提供認(rèn)證,以幫助培訓(xùn)者決定購(gòu)買與否;
l 為培訓(xùn)供應(yīng)商提供判斷課程質(zhì)量的基本依據(jù),以表明他們的課程滿足了最低標(biāo)準(zhǔn),為他們帶來(lái)附加的市場(chǎng)價(jià)值;
l 為改善E-Learning產(chǎn)品的整體質(zhì)量做貢獻(xiàn)。
ASTD E-Learning課件認(rèn)證項(xiàng)目是關(guān)于課件的兼容性、界面和教學(xué)設(shè)計(jì)的最早的評(píng)價(jià)項(xiàng)目,也是最早的完全基于網(wǎng)絡(luò)、具有工作流程工具和報(bào)告工具的項(xiàng)目。ASTD認(rèn)證委員會(huì)中包括了E-Learning專家學(xué)者、教學(xué)系統(tǒng)設(shè)計(jì)人員和其他一些學(xué)習(xí)行業(yè)的領(lǐng)導(dǎo)者。該委員會(huì)推出的認(rèn)證標(biāo)準(zhǔn)提供了支持評(píng)價(jià)者操作的例子、具體說(shuō)明、定義和其他支持性信息。
ADL是美國(guó)國(guó)防部(DoD)成立的一個(gè)專門針對(duì)分布式學(xué)習(xí)的研究機(jī)構(gòu)。按照美國(guó)國(guó)防部關(guān)于高級(jí)分布式學(xué)習(xí)的計(jì)劃,必須通過(guò)發(fā)展培訓(xùn)技術(shù)來(lái)確保國(guó)防部的所有人員在任何時(shí)間、任何地點(diǎn)都能獲得最高質(zhì)量的、經(jīng)濟(jì)有效的教育和培訓(xùn),并使之適合每一個(gè)學(xué)習(xí)者的需求。為此,國(guó)防部在奧蘭多成立了ADL聯(lián)合實(shí)驗(yàn)室,以推動(dòng)國(guó)防部?jī)?nèi)的高級(jí)分布式學(xué)習(xí)的實(shí)施。ADL網(wǎng)絡(luò)教學(xué)設(shè)計(jì)與評(píng)價(jià)指南旨在為網(wǎng)絡(luò)教學(xué)的設(shè)計(jì)過(guò)程和評(píng)價(jià)提供具體指導(dǎo)和參考框架,為高效率地合作開發(fā)高級(jí)分布式學(xué)習(xí)原型系統(tǒng)提供指導(dǎo),同時(shí)為高級(jí)分布式學(xué)習(xí)的管理者提供評(píng)估工具。該文件作為指南(guideline),既不同于規(guī)范(specification),也不同于網(wǎng)絡(luò)教學(xué)的原則(principle),而是界于兩者之間,比原則更具體,更具操作性,但并不像規(guī)范那樣詳細(xì)地規(guī)定網(wǎng)絡(luò)課程的細(xì)節(jié)問(wèn)題。
(二)標(biāo)準(zhǔn)內(nèi)容
ASTD E-Learning課件認(rèn)證標(biāo)準(zhǔn)從草案到目前推出的標(biāo)準(zhǔn)總共經(jīng)歷了3個(gè)版本,第一個(gè)版本包括了32條標(biāo)準(zhǔn),分為可用性和技術(shù)標(biāo)準(zhǔn)、教學(xué)設(shè)計(jì)標(biāo)準(zhǔn)(見表1)。第二個(gè)版本在第一個(gè)版本的基礎(chǔ)上進(jìn)行了修訂,包括19條標(biāo)準(zhǔn),分為界面標(biāo)準(zhǔn)、兼容性標(biāo)準(zhǔn)、產(chǎn)品質(zhì)量標(biāo)準(zhǔn)和教學(xué)設(shè)計(jì)標(biāo)準(zhǔn)四個(gè)類別。兼容性標(biāo)準(zhǔn)的內(nèi)容是網(wǎng)絡(luò)課程的技術(shù)性標(biāo)準(zhǔn),包括安裝、啟動(dòng)、運(yùn)行、卸載標(biāo)準(zhǔn)。產(chǎn)品質(zhì)量標(biāo)準(zhǔn)強(qiáng)調(diào)了文本和圖形的易讀性及課程格式設(shè)計(jì)和風(fēng)格的內(nèi)部一致性。教學(xué)設(shè)計(jì)標(biāo)準(zhǔn)包括了教學(xué)目標(biāo)、教學(xué)內(nèi)容、練習(xí)、教學(xué)評(píng)價(jià)等內(nèi)容。第三個(gè)版本在第二個(gè)版本的框架下對(duì)部分標(biāo)準(zhǔn)進(jìn)行了修訂(見表2)。
表1 ASTD E-Learning課件認(rèn)證標(biāo)準(zhǔn)最初版本的基本結(jié)構(gòu)
標(biāo)準(zhǔn) | 名稱 | 屬性 | 標(biāo)準(zhǔn) | 名稱 | 屬性 |
可用性 | 1. 導(dǎo)航 | 可替代 | 教學(xué)設(shè)計(jì) | 15. 目標(biāo)說(shuō)明 | 不可替代 |
2. 定位 | 可替代 | 16. 要求應(yīng)用 | 不可替代 | ||
3. 反饋提示 | 可替代 | 17. 引起注意和興趣 | 可替代 | ||
4. 鏈接 | 可替代 | 18. 保持學(xué)習(xí)動(dòng)機(jī) | 不可替代 | ||
5. 鏈接標(biāo)識(shí) | 可替代 | 19. 激發(fā)相關(guān)知識(shí) | 可替代 | ||
6. 幫助 | 可替代 | 20. 提供實(shí)例和演示 | 不可替代 | ||
7. 易讀性 | 不可替代 | 21. 闡釋和解說(shuō)內(nèi)容 | 不可替代 | ||
8. 文本作品質(zhì)量 | 不可替代 | 22. 提供應(yīng)用練習(xí) | 不可替代 | ||
23. 促進(jìn)近遷移學(xué)習(xí) | 可替代 | ||||
24. 促進(jìn)遠(yuǎn)遷移學(xué)習(xí) | 可替代 | ||||
技術(shù) | 9. 技術(shù)要求 | 不可替代 | 25. 提供綜合練習(xí) | 不可替代 | |
10. 安裝 | 不可替代 | 26. 提供反饋 | 可替代 | ||
11. 卸載(CD-ROM, DVD, WBT) | 不可替代 | 27. 近遷移練習(xí)反饋 | 可替代 | ||
12. 可靠性 | 可替代 | 28. 遠(yuǎn)遷移練習(xí)反饋 | 可替代 | ||
13. 響應(yīng)效能 | 可替代 | 29. 提供教學(xué)幫助 | 可替代 | ||
14. CD-ROM、DVD、WBT的退出效能 | 可替代 | 30. 學(xué)習(xí)評(píng)價(jià) | 不可替代 | ||
31. 媒體使用 | 不可替代 | ||||
32. 避免認(rèn)知負(fù)擔(dān)過(guò)重 | 不可替代 |
表2 ASTD E-Learning課件認(rèn)證標(biāo)準(zhǔn)第三個(gè)版本的基本結(jié)構(gòu)
標(biāo)準(zhǔn) | 名稱 | 屬性 | 標(biāo)準(zhǔn) | 名稱 | 屬性 |
界面 | 1. 定向 | 可替代 | 產(chǎn)品質(zhì)量 | 10. 文本和圖形的易讀性 | 不可替代 |
2. 跟蹤屬性 | 可替代 | 11. 格式設(shè)計(jì)和內(nèi)部一致性 | 可替代 | ||
3. 必須的導(dǎo)航功能 | 不可替代 | 教學(xué)設(shè)計(jì) | 12. 課程說(shuō)明 | 可替代 | |
4. 可選的導(dǎo)航裝置 | 可替代 | 13. 教學(xué)目標(biāo) | 不可替代 | ||
5. 操作支持 | 可替代 | 14. 目標(biāo)與內(nèi)容的一致性 | 不可替代 | ||
兼容性 | 6. 安裝(Installation)和首次啟動(dòng) | 不可替代 | 15. 信息表現(xiàn)和演示 | 不可替代 | |
7. 登錄 | 可替代 | 16. 促進(jìn)學(xué)習(xí) | 可替代 | ||
8. 后續(xù)運(yùn)行 | 可替代 | 17. 練習(xí)及反饋 | 不可替代 | ||
9. 卸載 | 可替代 | 18. 調(diào)動(dòng)學(xué)習(xí)者的投入 | 可替代 | ||
19. 學(xué)習(xí)測(cè)評(píng) | 可替代 |
表3 E-Learning課件認(rèn)證標(biāo)準(zhǔn)修訂前后的主要差異
| 最初標(biāo)準(zhǔn) | 修訂后的標(biāo)準(zhǔn) |
標(biāo)準(zhǔn)框架 | l 可用性和技術(shù)標(biāo)準(zhǔn) u 可用性標(biāo)準(zhǔn) u 技術(shù)標(biāo)準(zhǔn) l 教學(xué)設(shè)計(jì)標(biāo)準(zhǔn) | l 界面標(biāo)準(zhǔn) l 兼容性標(biāo)準(zhǔn) l 產(chǎn)品質(zhì)量標(biāo)準(zhǔn) l 教學(xué)設(shè)計(jì)標(biāo)準(zhǔn) |
評(píng)價(jià)方法 | 統(tǒng)一采用李克特式量表進(jìn)行四級(jí)或五級(jí)評(píng)定。 | 每條具體的標(biāo)準(zhǔn)分為若干關(guān)鍵特性,針對(duì)每個(gè)關(guān)鍵特性對(duì)網(wǎng)絡(luò)課程進(jìn)行測(cè)量和評(píng)級(jí)。 |
表3對(duì)ASTD E-Learning課件認(rèn)證標(biāo)準(zhǔn)的2個(gè)版本的主要差異做了對(duì)比。修訂后的標(biāo)準(zhǔn)對(duì)可用性和技術(shù)標(biāo)準(zhǔn)進(jìn)行了新的分類,主要是把“技術(shù)和可用性標(biāo)準(zhǔn)”分為“界面標(biāo)準(zhǔn)”、“兼容性標(biāo)準(zhǔn)”和“產(chǎn)品質(zhì)量標(biāo)準(zhǔn)”三個(gè)類別。對(duì)教學(xué)設(shè)計(jì)標(biāo)準(zhǔn)進(jìn)行了調(diào)整,突出了教學(xué)目標(biāo),合并了練習(xí)及練習(xí)反饋標(biāo)準(zhǔn)。在最初的標(biāo)準(zhǔn)中有應(yīng)用練習(xí)、近遷移練習(xí)、遠(yuǎn)遷移練習(xí)、綜合練習(xí)及針對(duì)各種練習(xí)的反饋標(biāo)準(zhǔn),在修訂后的標(biāo)準(zhǔn)中把7個(gè)標(biāo)準(zhǔn)合并為“練習(xí)及反饋”1個(gè)標(biāo)準(zhǔn)。
ADL網(wǎng)絡(luò)教學(xué)設(shè)計(jì)與評(píng)價(jià)指南包括了教學(xué)內(nèi)容設(shè)計(jì)、多媒體設(shè)計(jì)、網(wǎng)站設(shè)計(jì)、網(wǎng)頁(yè)布局和網(wǎng)頁(yè)可用性等幾個(gè)方面(見表4)。從內(nèi)容上看,該指南與ASTD E-Learning課件認(rèn)證標(biāo)準(zhǔn)有較大的一致性,都涉及到了網(wǎng)絡(luò)課程的教學(xué)設(shè)計(jì)、界面和技術(shù)方面的內(nèi)容,但ADL較多地強(qiáng)調(diào)了對(duì)課程內(nèi)容的質(zhì)量要求,而且通過(guò)細(xì)致的解釋和舉例為網(wǎng)絡(luò)課程的設(shè)計(jì)開發(fā)提供了具體指導(dǎo)。
表4 ADL網(wǎng)絡(luò)教學(xué)的設(shè)計(jì)與評(píng)價(jià)指南的框架
類別 | 原則 | 具體項(xiàng)目 | 類別 | 原則 | 具體項(xiàng)目 |
教學(xué)內(nèi)容設(shè)計(jì) | 可重用內(nèi)容對(duì)象設(shè)計(jì) | 可重用內(nèi)容對(duì)象 | 網(wǎng)站設(shè)計(jì) | 結(jié)構(gòu) |
|
元標(biāo)記與標(biāo)記框架 | 超鏈接 |
| |||
輔導(dǎo)型教學(xué)設(shè)計(jì) | 交互性 | 導(dǎo)航 |
| ||
學(xué)習(xí)者控制 | 圖形設(shè)計(jì) | 背景 |
| ||
個(gè)別化教學(xué) | 圖像地圖 |
| |||
多學(xué)習(xí)路徑 | 編輯風(fēng)格 |
| |||
教學(xué)策略 | 樣式 |
| |||
動(dòng)機(jī) |
| 表單 |
| ||
內(nèi)容相關(guān)性 |
| 網(wǎng)頁(yè)布局 | 頁(yè)面設(shè)計(jì) |
| |
內(nèi)容準(zhǔn)確性 |
| 表格和框架 |
| ||
多媒體設(shè)計(jì) | 動(dòng)畫 |
| 網(wǎng)頁(yè)可用性 | 易得性 |
|
音頻 |
| ||||
視頻 |
| ||||
文本和插圖 |
|
ADL網(wǎng)絡(luò)教學(xué)設(shè)計(jì)和評(píng)價(jià)指南規(guī)定了網(wǎng)絡(luò)教學(xué)設(shè)計(jì)過(guò)程中應(yīng)遵循的一些基本規(guī)則,這可以指導(dǎo)網(wǎng)絡(luò)課程的設(shè)計(jì),并為網(wǎng)絡(luò)課程設(shè)計(jì)開發(fā)過(guò)程中的形成性評(píng)價(jià)和內(nèi)部評(píng)價(jià)提供了一個(gè)核查工具,很有參考意義。
(三)評(píng)價(jià)方法
ADL網(wǎng)絡(luò)教學(xué)的設(shè)計(jì)和評(píng)價(jià)指南提供了評(píng)價(jià)的核查表(checklist),采用5點(diǎn)量表來(lái)判斷某個(gè)課程是否符合各項(xiàng)規(guī)定:完全沒(méi)有= 0%, 很少= 25%, 有時(shí)= 50%, 經(jīng)常= 75%, 總是= 100%。ASTD E-Learning課件認(rèn)證標(biāo)準(zhǔn)采用指標(biāo)體系評(píng)價(jià)法進(jìn)行評(píng)價(jià),具有更完備的評(píng)價(jià)方法說(shuō)明,以下著重分析這一標(biāo)準(zhǔn)的評(píng)估方法。
在評(píng)分方法上,ASTD E-Learning課件認(rèn)證標(biāo)準(zhǔn)第一個(gè)版本統(tǒng)一采用李克特式量表進(jìn)行四級(jí)或五級(jí)評(píng)定,即按照課程滿足每條標(biāo)準(zhǔn)的程度劃分出四個(gè)或五個(gè)連續(xù)的等級(jí),根據(jù)這些等級(jí)對(duì)具體的課程進(jìn)行測(cè)量和評(píng)分。后兩個(gè)版本的標(biāo)準(zhǔn)把每條標(biāo)準(zhǔn)劃分出若干關(guān)鍵特性,每個(gè)關(guān)鍵特性具有不同的通過(guò)分值,針對(duì)每個(gè)關(guān)鍵特性對(duì)具體的網(wǎng)絡(luò)課程進(jìn)行測(cè)量和評(píng)分。比如“標(biāo)準(zhǔn)1:定向”具有四個(gè)關(guān)鍵特性,即“課程地圖”、“導(dǎo)航框架”、“內(nèi)容框架”和“學(xué)習(xí)過(guò)程記錄”,它們的通過(guò)分值分別為3、2、2、2;如果某課程在這條標(biāo)準(zhǔn)上總體得分達(dá)到或超過(guò)6分就算通過(guò)。
另外,ASTD E-Learning課件認(rèn)證標(biāo)準(zhǔn)規(guī)定了每條具體標(biāo)準(zhǔn)的約束性屬性,包括“可替代(Substitutable)”或“不可替代(Non-Substitutable)”兩種屬性。不可替代的標(biāo)準(zhǔn)是異步網(wǎng)絡(luò)課程和多媒體課件必須達(dá)到的標(biāo)準(zhǔn),可以替代的標(biāo)準(zhǔn)在界面標(biāo)準(zhǔn)、兼容性標(biāo)準(zhǔn)和產(chǎn)品質(zhì)量標(biāo)準(zhǔn)3個(gè)部分要達(dá)到5條以上,在教學(xué)設(shè)計(jì)標(biāo)準(zhǔn)部分要達(dá)到2條以上,整個(gè)課件才可以通過(guò)認(rèn)證。每一條具體標(biāo)準(zhǔn)根據(jù)評(píng)價(jià)的內(nèi)容概括為幾個(gè)關(guān)鍵特性,每個(gè)關(guān)鍵特性賦予不同的分值,用來(lái)作為評(píng)價(jià)待評(píng)課件是否達(dá)到該條標(biāo)準(zhǔn)的依據(jù)和參照。
(四)評(píng)析
ASTD E-Learning課件認(rèn)證標(biāo)準(zhǔn)的優(yōu)點(diǎn)是具有完整的量化的、可操作的評(píng)價(jià)指標(biāo)體系和評(píng)估方法,標(biāo)準(zhǔn)的對(duì)象和目的明確。但是它是一個(gè)協(xié)會(huì)的標(biāo)準(zhǔn),不是正式的部門或者國(guó)家標(biāo)準(zhǔn);從標(biāo)準(zhǔn)內(nèi)容上說(shuō),它對(duì)課程內(nèi)容的評(píng)價(jià)不充分。從標(biāo)準(zhǔn)的發(fā)展上說(shuō),ASTD E-Learning課件認(rèn)證標(biāo)準(zhǔn)從初步的標(biāo)準(zhǔn)到目前推出的標(biāo)準(zhǔn)共形成了標(biāo)準(zhǔn)的三個(gè)版本,這三個(gè)版本從具體的標(biāo)準(zhǔn)條目到整個(gè)標(biāo)準(zhǔn)框架都作了較大的變動(dòng),這說(shuō)明該標(biāo)準(zhǔn)仍在不斷完善的過(guò)程中,目前推出的標(biāo)準(zhǔn)也還不是一個(gè)成熟和完美的標(biāo)準(zhǔn),主要是為商業(yè)目的而使用的協(xié)會(huì)標(biāo)準(zhǔn)。有些標(biāo)準(zhǔn)與我國(guó)的習(xí)慣不同,在網(wǎng)絡(luò)課程開發(fā)和評(píng)價(jià)的實(shí)踐中,我們應(yīng)當(dāng)對(duì)這樣的標(biāo)準(zhǔn)進(jìn)行改造。
ADL網(wǎng)絡(luò)教學(xué)設(shè)計(jì)與評(píng)價(jià)指南的優(yōu)點(diǎn)是把設(shè)計(jì)和評(píng)價(jià)結(jié)合起來(lái)考慮,包括的范圍廣泛,提供了詳細(xì)的網(wǎng)絡(luò)教學(xué)設(shè)計(jì)原則、框架和具體實(shí)例。不足之處在于它的可操作性不強(qiáng),要把它作為評(píng)估大量網(wǎng)絡(luò)課程的標(biāo)準(zhǔn)需要對(duì)各個(gè)原則更明確地進(jìn)行操作化。
(五)其它相關(guān)研究
除了上述兩個(gè)影響較大的評(píng)價(jià)標(biāo)準(zhǔn)之外,其他研究者或機(jī)構(gòu)也針對(duì)網(wǎng)絡(luò)課程的評(píng)價(jià)問(wèn)題做了許多相關(guān)的研究工作。比如,Learning Guide是美國(guó)的一個(gè)獨(dú)立的E-Learning研究咨詢服務(wù)機(jī)構(gòu),它從內(nèi)容(Content)、設(shè)計(jì)和發(fā)布(Design and Delivery)、價(jià)值(Value)3個(gè)方面對(duì)網(wǎng)絡(luò)課程進(jìn)行評(píng)價(jià)。“內(nèi)容”方面包括了針對(duì)多媒體網(wǎng)絡(luò)教育資源部分的大部分主題(如課程內(nèi)容自身的質(zhì)量、表現(xiàn)形式、內(nèi)容的組織性、與目標(biāo)相關(guān)性、是否適合學(xué)習(xí)者等);“設(shè)計(jì)和發(fā)布”包括了網(wǎng)絡(luò)課程的功能特性、教學(xué)設(shè)計(jì)(如交互活動(dòng)、多媒體應(yīng)用、模擬、練習(xí)和評(píng)價(jià)等)以及界面設(shè)計(jì)(如導(dǎo)航、課程的外觀設(shè)計(jì)等);“價(jià)值”包括了課程的經(jīng)濟(jì)性和總體價(jià)值等內(nèi)容。
另外,有些研究者對(duì)整個(gè)網(wǎng)絡(luò)教育系統(tǒng)的評(píng)價(jià)做了研究,其中包括但不限于網(wǎng)絡(luò)課程本身。比如,George Washington大學(xué)的Badrul H. Khan(2000)博士提出了靈活、開放的分布式學(xué)習(xí)或E-Learning環(huán)境的設(shè)計(jì)與評(píng)價(jià)框架,該框架包含機(jī)構(gòu)、教育、技術(shù)、界面設(shè)計(jì)、評(píng)價(jià)、管理、資源支持和倫理8個(gè)維度,每個(gè)維度又分別由多個(gè)子維度組成,分別針對(duì)E-Learning環(huán)境某一具體方面。該框架綜合概括了有效的E-Learning學(xué)習(xí)環(huán)境應(yīng)考慮的各個(gè)要素,其中有些維度(如教育、技術(shù)、界面設(shè)計(jì)等)與網(wǎng)絡(luò)課程的評(píng)價(jià)有直接的關(guān)系。
二、針對(duì)多媒體網(wǎng)絡(luò)教育資源的評(píng)價(jià)標(biāo)準(zhǔn)
與網(wǎng)絡(luò)課程的評(píng)價(jià)標(biāo)準(zhǔn)密切相關(guān),當(dāng)前有些研究者或機(jī)構(gòu)提出了對(duì)于網(wǎng)絡(luò)教育資源的評(píng)價(jià)標(biāo)準(zhǔn)。網(wǎng)絡(luò)課程是基于Web傳輸?shù)臑橥瓿赡硨W(xué)科或領(lǐng)域的教學(xué)目標(biāo)而設(shè)計(jì)、組織起來(lái)的相對(duì)完整的學(xué)習(xí)經(jīng)驗(yàn)體系,它包括圍繞特定學(xué)習(xí)目標(biāo)而設(shè)計(jì)組織的系列學(xué)習(xí)內(nèi)容、為實(shí)施課程而設(shè)計(jì)的交互性學(xué)習(xí)活動(dòng)、以及為評(píng)價(jià)課程效果而進(jìn)行的測(cè)評(píng)等,是學(xué)習(xí)內(nèi)容與學(xué)習(xí)活動(dòng)的復(fù)合體。網(wǎng)絡(luò)教育資源比網(wǎng)絡(luò)課程的范圍更廣,除了網(wǎng)絡(luò)課程之外,它還包括了結(jié)合某課程中的具體知識(shí)點(diǎn)或?qū)W習(xí)單元而設(shè)計(jì)的不同類型的網(wǎng)絡(luò)課件以及各種可以用于教育的信息資源,這些資源并不一定具有像網(wǎng)絡(luò)課程那樣的完整體系和全面的教學(xué)功能。針對(duì)多媒體網(wǎng)絡(luò)教育資源的評(píng)價(jià)標(biāo)準(zhǔn)所針對(duì)的主要問(wèn)題是如何對(duì)海量的網(wǎng)絡(luò)資源進(jìn)行選擇,判斷特定資源是否具有合格的質(zhì)量,是否適用于教學(xué)。
“教育資源門戶”(The Gateway to Educational Material,簡(jiǎn)稱GEM)是在美國(guó)教育部的支持下建立的網(wǎng)絡(luò)系統(tǒng),旨在幫助美國(guó)的教育者能夠方便快捷的獲取各種各樣的網(wǎng)上教育資源。為了對(duì)各種教育資源進(jìn)行評(píng)價(jià),GEM從網(wǎng)絡(luò)資源的質(zhì)量特性出發(fā),制定了對(duì)網(wǎng)絡(luò)教學(xué)資源進(jìn)行評(píng)價(jià)的7個(gè)方面的標(biāo)準(zhǔn):(1)網(wǎng)絡(luò)資源的準(zhǔn)確性(Accuracy):包括科學(xué)性、可靠性、時(shí)效性;(2)對(duì)學(xué)習(xí)者的適當(dāng)性(Appropriateness);(3)目標(biāo)、方法、程序及評(píng)價(jià)信息的明確性(Clarity);(4)與學(xué)習(xí)目標(biāo)的相關(guān)性(Relevancy);(5)資源自身的完整性(Completeness);(6)動(dòng)機(jī)性(Motivation):資源的內(nèi)容、表現(xiàn)方法是否能吸引學(xué)習(xí)者的投入;(7)內(nèi)容的組織性(Organization)。每個(gè)特性下包含有體現(xiàn)了該特性的幾個(gè)子問(wèn)題,評(píng)價(jià)者根據(jù)子問(wèn)題判斷被評(píng)價(jià)的資源是否滿足了這些特征。判斷的等級(jí)有“非常不同意(Strongly disagree)”、“不同意(Disagree)”、“難以判斷(Undecided)”、“同意(Agree)”和“非常同意(Strongly agree)”。
另外,MERLOT(Multimedia Educational Resource for Learning and Online Teaching)作為主要面向高校師生的免費(fèi)資源網(wǎng)站,從內(nèi)容質(zhì)量、作為教—學(xué)工具的潛力和易用性3個(gè)方面對(duì)多媒體網(wǎng)絡(luò)教育資源進(jìn)行評(píng)價(jià)。網(wǎng)上信息資源CARS列表評(píng)價(jià)法(見祝智庭,2001,p.59-63)從網(wǎng)上資源的可信度(Credibility)、準(zhǔn)確度(Accuracy)、合理性(Reasonability)、引證度(Support)等4個(gè)方面對(duì)網(wǎng)絡(luò)上的信息資源進(jìn)行評(píng)價(jià)。
三、針對(duì)網(wǎng)絡(luò)課程的具體側(cè)面的評(píng)價(jià)標(biāo)準(zhǔn)
針對(duì)網(wǎng)絡(luò)課程具體側(cè)面的評(píng)價(jià)標(biāo)準(zhǔn)對(duì)網(wǎng)絡(luò)課程的某個(gè)側(cè)面或具體特性進(jìn)行了細(xì)致和深入的評(píng)價(jià),不涉及課程的其它方面。這類研究對(duì)于深化關(guān)于網(wǎng)絡(luò)課程的研究具有較高的價(jià)值和指導(dǎo)意義。
Reeves & Harmon(1993)提出了多媒體教育軟件的用戶界面評(píng)價(jià)標(biāo)準(zhǔn),包括10個(gè)維度:(1)容易使用(Easy of use);(2)導(dǎo)航(Navigation);(3)認(rèn)知負(fù)擔(dān)(Cognitive load);(4)地圖(Mapping);(5)屏幕設(shè)計(jì)(Screen design);(6)知識(shí)空間兼容性(Knowledge space compatibility);(7)信息呈現(xiàn)(Information presentation);(8)媒體整合(Media integration);(9)美學(xué)(Aesthetics);(10)總體功能(Overall functionality)。每個(gè)維度都具有10個(gè)等級(jí),評(píng)價(jià)者據(jù)此對(duì)具體課程的用戶界面進(jìn)行打分,同時(shí)請(qǐng)?jiān)u價(jià)者給出簡(jiǎn)短的評(píng)論。
Roblyer & Ekhaml(2000)在對(duì)大量文獻(xiàn)分析的基礎(chǔ)上對(duì)遠(yuǎn)程課程的交互性的評(píng)價(jià)做了專門研究。他們?cè)O(shè)計(jì)了一個(gè)教師可以用來(lái)評(píng)判自己的遠(yuǎn)程課程的交互性程度的量規(guī)(rubric),把遠(yuǎn)程課程中的交互性分為4個(gè)維度:教師建立社會(huì)關(guān)系的活動(dòng)、用以促進(jìn)學(xué)生參與的教學(xué)設(shè)計(jì)、技術(shù)資源的交互性等級(jí)和交互活動(dòng)對(duì)學(xué)生學(xué)習(xí)的作用。這4個(gè)維度分別體現(xiàn)了交互性的社會(huì)目標(biāo)、交互性的教學(xué)目標(biāo)及其實(shí)現(xiàn)、各種技術(shù)手段對(duì)交互性的影響以及交互活動(dòng)對(duì)學(xué)習(xí)者的實(shí)際影響。他們把遠(yuǎn)程課程中交互性的程度劃分為5個(gè)等級(jí),每個(gè)等級(jí)具有相應(yīng)的等級(jí)分:極低的交互性(1分)、最起碼的交互性(2分)、中等程度交互性(3分)、中上程度的交互性(4分)和高交互性(5分)。課程最終的交互性程度分為低交互性(在4個(gè)維度上獲得1-7分)、中等交互性(8-14分)和高交互性(15-20分)。應(yīng)該說(shuō),這一研究中所針對(duì)的交互性的實(shí)現(xiàn)不僅僅依賴于課程資源的設(shè)計(jì)開發(fā),同時(shí)也在很大程度上依賴于課程的有效組織實(shí)施,即教學(xué)過(guò)程。
四、國(guó)內(nèi)網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)研究
國(guó)內(nèi)學(xué)者曾經(jīng)針對(duì)CAI課件的評(píng)價(jià)做了較多研究,近年來(lái)又在這些研究的基礎(chǔ)上對(duì)網(wǎng)絡(luò)課程或課件的評(píng)價(jià)做了探索。
丁興富(2001)提出,可以從開放與靈活性、資源全球共享、交互參與和協(xié)作、環(huán)境營(yíng)造、更新內(nèi)容、教學(xué)模式創(chuàng)新等側(cè)面來(lái)對(duì)網(wǎng)絡(luò)教育資源進(jìn)行評(píng)價(jià)。劉成新(2000)提出了網(wǎng)絡(luò)教學(xué)資源的評(píng)價(jià)框架,從教學(xué)內(nèi)容設(shè)計(jì)、框架結(jié)構(gòu)設(shè)計(jì)、教學(xué)構(gòu)件設(shè)計(jì)和用戶界面設(shè)計(jì)4個(gè)方面的評(píng)價(jià)項(xiàng)目來(lái)評(píng)價(jià)網(wǎng)絡(luò)教育資源的質(zhì)量和水平。熊才平、吳瑞華(2001)構(gòu)建了“網(wǎng)絡(luò)課程績(jī)效評(píng)價(jià)指標(biāo)”,分為一級(jí)指標(biāo)和二級(jí)指標(biāo),一級(jí)指標(biāo)包括教育性、科學(xué)性、技術(shù)性、交互性、開放性、藝術(shù)性、使用性和經(jīng)濟(jì)性等8個(gè)方面。
教育部《教育資源建設(shè)技術(shù)規(guī)范》對(duì)于網(wǎng)絡(luò)課程以及各種網(wǎng)絡(luò)教育資源的設(shè)計(jì)開發(fā)和評(píng)價(jià)做了基本要求(該文件已經(jīng)廣泛發(fā)布,這里不再多加介紹)。另外,結(jié)合教育部高教司新世紀(jì)網(wǎng)絡(luò)課程建設(shè)項(xiàng)目的驗(yàn)收工作,北師大的黃榮懷等人研制了網(wǎng)絡(luò)課程課件部分測(cè)評(píng)(認(rèn)證)標(biāo)準(zhǔn)(試行)。整個(gè)標(biāo)準(zhǔn)采用指標(biāo)體系評(píng)價(jià)法,按照“一級(jí)指標(biāo)”、“二級(jí)指標(biāo)”、“三級(jí)指標(biāo)”逐級(jí)細(xì)化指標(biāo)。標(biāo)準(zhǔn)的一級(jí)指標(biāo)包括教學(xué)設(shè)計(jì)、教學(xué)內(nèi)容、可用性、技術(shù)性、信息呈現(xiàn)和文檔資料等6個(gè)方面。在評(píng)價(jià)實(shí)施過(guò)程中,標(biāo)準(zhǔn)要求課件開發(fā)者針對(duì)每個(gè)指標(biāo)進(jìn)行“舉證說(shuō)明”,即要求開發(fā)者提供關(guān)于課件滿足各項(xiàng)指標(biāo)的實(shí)例材料。上述標(biāo)準(zhǔn)的制定較多地參考了ASTD的標(biāo)準(zhǔn)。
五、總結(jié)
綜上所述,國(guó)內(nèi)外近年來(lái)對(duì)網(wǎng)絡(luò)課程的評(píng)價(jià)標(biāo)準(zhǔn)問(wèn)題做了一定的研究,但目前還沒(méi)有共識(shí)性的、廣泛采用的、科學(xué)完善的標(biāo)準(zhǔn),因此,我們需要在相關(guān)研究的基礎(chǔ)上進(jìn)一步制訂適合我國(guó)國(guó)情的網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)。
基于以上分析可以看出:
(1) 針對(duì)網(wǎng)絡(luò)課程的評(píng)價(jià)標(biāo)準(zhǔn)及相關(guān)研究主要集中在課程內(nèi)容、教學(xué)設(shè)計(jì)、界面、技術(shù)等幾個(gè)方面,這些內(nèi)容可以成為我國(guó)網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)的基本內(nèi)容。
(2) 從評(píng)價(jià)方法上看,國(guó)內(nèi)外網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)主要采用了指標(biāo)體系評(píng)價(jià)法對(duì)整個(gè)網(wǎng)絡(luò)課程和網(wǎng)絡(luò)課程的各個(gè)具體側(cè)面進(jìn)行評(píng)價(jià),這些標(biāo)準(zhǔn)的具體評(píng)價(jià)方案對(duì)制定我國(guó)的網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)具有很好的啟發(fā)意義和參考價(jià)值。
(3) 國(guó)內(nèi)外的現(xiàn)有標(biāo)準(zhǔn)并不完善,尤其是沒(méi)有完全遵循標(biāo)準(zhǔn)研制的程序方法進(jìn)行研究和評(píng)議。因此我們?cè)趨⒖己徒梃b國(guó)外網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)時(shí)不能直接采用“拿來(lái)主義”的做法,要結(jié)合國(guó)內(nèi)網(wǎng)絡(luò)課程開發(fā)和研究的實(shí)際情況,按照標(biāo)準(zhǔn)研制的程序和方法研制適合我國(guó)實(shí)情的網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)及其評(píng)價(jià)方案。
在上述相關(guān)研究與實(shí)踐的基礎(chǔ)上,我們進(jìn)行了CELTS-22 “課程資源評(píng)價(jià)標(biāo)準(zhǔn)”的研制工作。本規(guī)范針對(duì)高等教育、職業(yè)培訓(xùn)以及基礎(chǔ)教育領(lǐng)域中的網(wǎng)絡(luò)課程,提出了網(wǎng)絡(luò)課程評(píng)價(jià)的一般性規(guī)范,包括框架結(jié)構(gòu)和指標(biāo)體系。本規(guī)范定義了課程內(nèi)容、教學(xué)設(shè)計(jì)、界面設(shè)計(jì)和技術(shù)等四個(gè)維度的特性,每個(gè)維度下包含有具體的評(píng)價(jià)指標(biāo),以最小的重迭描述了網(wǎng)絡(luò)課程的質(zhì)量特性。(1)課程內(nèi)容:指課程內(nèi)容本身的學(xué)術(shù)質(zhì)量和組織結(jié)構(gòu),這是決定網(wǎng)絡(luò)課程質(zhì)量的核心要素;(2)教學(xué)設(shè)計(jì):指對(duì)課程的教學(xué)目標(biāo)、教學(xué)過(guò)程及教學(xué)測(cè)評(píng)方法的合理設(shè)計(jì),這是決定網(wǎng)絡(luò)課程質(zhì)量的關(guān)鍵,是網(wǎng)絡(luò)課程區(qū)別于一般網(wǎng)絡(luò)軟件的特色性維度;(3)界面設(shè)計(jì):指對(duì)學(xué)習(xí)者與網(wǎng)絡(luò)課程系統(tǒng)之間的信息交流方式的設(shè)計(jì),簡(jiǎn)便易用的人性化的界面設(shè)計(jì)是決定網(wǎng)絡(luò)課程質(zhì)量的另一個(gè)重要因素;(4)技術(shù):可靠、適當(dāng)?shù)募夹g(shù)是網(wǎng)絡(luò)課程質(zhì)量的前提和基本保障。我們采用德爾菲法對(duì)標(biāo)準(zhǔn)框架和指標(biāo)體系進(jìn)行了兩輪專家評(píng)議,表明整個(gè)標(biāo)準(zhǔn)框架和指標(biāo)體系達(dá)到了較高的共識(shí)性水平,具有較高的明確性和合理性。另外,我們采用Angoff法對(duì)網(wǎng)絡(luò)課程評(píng)價(jià)的通過(guò)線問(wèn)題做了初步研究。我們將另外撰寫論文詳細(xì)報(bào)告這些研究的過(guò)程和結(jié)果。
參考文獻(xiàn)
1. Advanced Distributed Learning Guidelines for Design and Evaluation of Web-Based Instruction. http://www.adlnet.org. 2001.6
2. Evaluation Standards for Learning Materials in MERLOT. http://www.merlot.org. 2002.1.17
3. Khan, B. (2000). Web-Based Training. Englewood Cliffs, NJ: Educational Technology Publications.
4. Learning Guide Criteria. http://www.lguide.com. 2001.9.2
5. Reeves, T. & Harmon, S. (2001). User Interface Rating Tool for Interactive Multimedia. http://mimel.marc.gatech.edu.
6. Roblyer, M. D. & Ekhaml, L. (2000). How Interactive are Your Distance Courses? A Rubric for Assessing Interaction in Distance Learning. Online Journal of Distance Learning Administration, 3(2). http://www.westga.edu/~distance/roblyer32.html.
7. The ASTD Institute E-Learning Courseware Certification (ECC) Standards. http://www.astd.org. 2001.9.21; 2002.3.18
8. The Gateway to Educational Materials (GEM) Guidelines for Resource Evaluation. http://www.geminfo.org. 2001.8.21
9. 丁興富. 網(wǎng)絡(luò)教育的春秋時(shí)代及其對(duì)策. 現(xiàn)代教育技術(shù),2001.11
10. 劉成新. 網(wǎng)絡(luò)教學(xué)資源的設(shè)計(jì)、開發(fā)與評(píng)價(jià). 電化教育研究,2000.3
11. 熊才平,吳瑞華. 網(wǎng)絡(luò)課程績(jī)效評(píng)價(jià)指標(biāo)體系的構(gòu)建研究. 現(xiàn)代教育技術(shù),2001.11
12. 祝智庭. 網(wǎng)絡(luò)教育應(yīng)用教程. 北京:北京師范大學(xué)出版社,2001
英文題目及摘要
Review on the Standard for Evaluating Web-Based Courses
Abstract
This paper made a review on the researches and practices of Web-based courses evaluating standards. The related works were reviewed under three major topics: evaluation standards for whole Web-based courses, evaluation standards of broader online learning resources, and evaluation of the specific features of Web-based course such as HCI and interactivity. Conclusions were drawn concerning how to develop the evaluating standard that is proper for
Keywords: Web-based course, evaluation, standard, online course
段崇江是清華大學(xué)教育技術(shù)學(xué)專業(yè)碩士研究生,現(xiàn)工作于云南師范大學(xué)計(jì)算機(jī)科學(xué)與信息技術(shù)學(xué)院;張建偉系講師、博士;滕霞系高級(jí)訪問(wèn)學(xué)者;王學(xué)優(yōu)系副研究員。
聯(lián)系人及方式
張建偉,zhangjw@tsinghua.edu.cn, Tel, 13910325460, 62782405
聯(lián)系客服