摘　要：本研究按照標(biāo)準(zhǔn)研制過程在開發(fā)階段和建立共識(shí)階段上的要求，建立了初步的網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)指標(biāo)體系，隨后采用德爾菲法進(jìn)行了兩輪專家評(píng)議，初步形成了具有共識(shí)性的網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)指標(biāo)體系及其評(píng)價(jià)方案。

關(guān)鍵詞：CELTS-22；網(wǎng)絡(luò)課程；評(píng)價(jià)；標(biāo)準(zhǔn)；研究方法；專家評(píng)議

隨著網(wǎng)絡(luò)教育的快速發(fā)展，其質(zhì)量保證問題引起了越來越多的關(guān)注。網(wǎng)絡(luò)課程的質(zhì)量是制約整個(gè)網(wǎng)絡(luò)教育質(zhì)量的一個(gè)關(guān)鍵環(huán)節(jié)，網(wǎng)絡(luò)課程的評(píng)價(jià)標(biāo)準(zhǔn)問題是當(dāng)前網(wǎng)絡(luò)教育發(fā)展中必須盡快解決的一個(gè)重要問題。我國教育部于2001年6月成立了“現(xiàn)代遠(yuǎn)程教育技術(shù)標(biāo)準(zhǔn)化委員會(huì)”，后改名為“教育信息化技術(shù)標(biāo)準(zhǔn)委員會(huì)”（CELTS），啟動(dòng)了系列研究項(xiàng)目。我們承擔(dān)了其中CELTS-22 “網(wǎng)絡(luò)課程質(zhì)量評(píng)價(jià)規(guī)范”的研制工作。在標(biāo)準(zhǔn)研制過程中，我們對(duì)國內(nèi)外有關(guān)網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)的研究做了綜合分析（見段崇江等，2002）。本文將在此基礎(chǔ)上介紹CELTS-22標(biāo)準(zhǔn)研制的方法過程和基本結(jié)果。

一、研究思路與方法

（一）研究目標(biāo)

CELTS-22標(biāo)準(zhǔn)研制的目標(biāo)，是針對(duì)高等教育、職業(yè)培訓(xùn)以及基礎(chǔ)教育領(lǐng)域中的網(wǎng)絡(luò)課程，提出網(wǎng)絡(luò)課程質(zhì)量評(píng)價(jià)的指標(biāo)體系和評(píng)價(jià)指南。本標(biāo)準(zhǔn)所針對(duì)的評(píng)價(jià)對(duì)象是作為最終產(chǎn)品或階段性產(chǎn)品的網(wǎng)絡(luò)課程，以網(wǎng)絡(luò)課程產(chǎn)品用于教學(xué)或培訓(xùn)的潛在價(jià)值為著眼點(diǎn)，評(píng)價(jià)網(wǎng)絡(luò)課程資源的內(nèi)容和功能特性。但本標(biāo)準(zhǔn)不具體規(guī)定網(wǎng)絡(luò)課程產(chǎn)品進(jìn)入到實(shí)際教學(xué)和培訓(xùn)活動(dòng)之后的應(yīng)用方式或效果。一門合格的網(wǎng)絡(luò)課程的實(shí)際教學(xué)效果還取決于對(duì)它的具體應(yīng)用方式以及相關(guān)制約環(huán)節(jié)（如教學(xué)安排、學(xué)習(xí)支持服務(wù)、輔助資源等）。

本標(biāo)準(zhǔn)所針對(duì)的網(wǎng)絡(luò)課程是基于Web的、以超媒體形式表現(xiàn)的、以異步學(xué)習(xí)為主的課程，它是基于Web傳輸?shù)臑橥瓿赡硨W(xué)科或領(lǐng)域的教學(xué)目標(biāo)而設(shè)計(jì)、組織起來的相對(duì)完整的學(xué)習(xí)經(jīng)驗(yàn)體系，它包括圍繞特定學(xué)習(xí)目標(biāo)而設(shè)計(jì)組織的學(xué)習(xí)內(nèi)容、為實(shí)施課程而設(shè)計(jì)的交互性學(xué)習(xí)活動(dòng)、以及為評(píng)價(jià)課程效果而進(jìn)行的測(cè)評(píng)等，是學(xué)習(xí)內(nèi)容與學(xué)習(xí)活動(dòng)的復(fù)合體。本標(biāo)準(zhǔn)針對(duì)的是網(wǎng)絡(luò)課程，它也可以部分地適用于網(wǎng)絡(luò)課件的評(píng)價(jià)。網(wǎng)絡(luò)課件通常是結(jié)合某課程中的具體知識(shí)點(diǎn)或?qū)W習(xí)單元而設(shè)計(jì)的用于訓(xùn)練或教學(xué)的網(wǎng)絡(luò)軟件。本標(biāo)準(zhǔn)中的大部分內(nèi)容適用于網(wǎng)絡(luò)課件的評(píng)價(jià)，但單個(gè)網(wǎng)絡(luò)課件一般無法涵蓋本標(biāo)準(zhǔn)所規(guī)定的網(wǎng)絡(luò)課程的全部質(zhì)量特性。

本標(biāo)準(zhǔn)針對(duì)的是基于Web的課程（Web-Based Courses），是以Web作為主要傳輸途徑而實(shí)現(xiàn)的網(wǎng)絡(luò)課程，而不是以課堂教學(xué)或其它途徑為主、以Web作為輔助工具實(shí)現(xiàn)的網(wǎng)絡(luò)增強(qiáng)性課程(Web-Enhanced Courses)。對(duì)于后者也可以部分地參考本標(biāo)準(zhǔn)進(jìn)行評(píng)價(jià)，但一般無法涵蓋本標(biāo)準(zhǔn)所規(guī)定的網(wǎng)絡(luò)課程的全部質(zhì)量特性。

本標(biāo)準(zhǔn)可以作為外部評(píng)價(jià)使用，即由課程開發(fā)者和使用者以外的第三方針對(duì)開發(fā)完成的具體的網(wǎng)絡(luò)課程作出評(píng)價(jià)，為選擇課程的決策者、網(wǎng)絡(luò)教育的管理者及課程的使用者提供被評(píng)價(jià)的網(wǎng)絡(luò)課程的有效性和質(zhì)量的依據(jù)。本研究制定的標(biāo)準(zhǔn)還可以作為內(nèi)部評(píng)價(jià)使用，即由網(wǎng)絡(luò)課程開發(fā)者進(jìn)行自評(píng)，包括在開發(fā)過程中針對(duì)開發(fā)中的網(wǎng)絡(luò)課程進(jìn)行形成性評(píng)價(jià)和針對(duì)開發(fā)完成的網(wǎng)絡(luò)課程進(jìn)行總結(jié)性評(píng)價(jià)。

（二）研究方法

1．標(biāo)準(zhǔn)化及標(biāo)準(zhǔn)研制過程

標(biāo)準(zhǔn)化是一個(gè)過程，主要是制定標(biāo)準(zhǔn)、實(shí)施標(biāo)準(zhǔn)、并使客觀事物達(dá)到有序化的過程。標(biāo)準(zhǔn)是標(biāo)準(zhǔn)化的產(chǎn)物，是建立在科學(xué)技術(shù)和實(shí)踐經(jīng)驗(yàn)的綜合成果的基礎(chǔ)上、由一個(gè)獲得權(quán)威機(jī)構(gòu)認(rèn)證(Accreditation)的標(biāo)準(zhǔn)開發(fā)組織提出的文件，是規(guī)范人類實(shí)踐活動(dòng)的有效工具。標(biāo)準(zhǔn)在其生存期（Life Cycle）中可以劃分為四個(gè)階段（Farance，2001）。（1）開發(fā)（Development）：通過文獻(xiàn)和采用其他組織的標(biāo)準(zhǔn)建立初步的標(biāo)準(zhǔn)。（2）建立共識(shí)（Consensus-Building）：標(biāo)準(zhǔn)開發(fā)組織與其他組織形成協(xié)作和一致，盡快征集有關(guān)人員的意見，根據(jù)這些意見對(duì)初步的標(biāo)準(zhǔn)進(jìn)行修改，逐步形成工作組草案、委員會(huì)草案、標(biāo)準(zhǔn)草案，最終建立通過認(rèn)證的標(biāo)準(zhǔn)。（3）維護(hù)（Maintenance）：標(biāo)準(zhǔn)開發(fā)組接受詢問，對(duì)標(biāo)準(zhǔn)加以解釋，在標(biāo)準(zhǔn)試用中搜集錯(cuò)誤報(bào)告（Defect Reports），保留反應(yīng)記錄（Record of Responses），進(jìn)行校正和技術(shù)勘誤。（4）修訂（Review）：根據(jù)發(fā)展增加新的標(biāo)準(zhǔn)條目，維持沒有變化的標(biāo)準(zhǔn)，取消已經(jīng)不再適用的條目。本研究遵循標(biāo)準(zhǔn)研制的一般程序，目前已經(jīng)進(jìn)行了標(biāo)準(zhǔn)的開發(fā)和建立共識(shí)兩個(gè)環(huán)節(jié)的工作。

2．評(píng)價(jià)方法的選擇

教育軟件的評(píng)價(jià)方法主要有四種：分析評(píng)價(jià)法、指標(biāo)體系評(píng)價(jià)法、觀察評(píng)價(jià)法和實(shí)驗(yàn)評(píng)價(jià)法，這些評(píng)價(jià)方法各有優(yōu)缺點(diǎn)（楊真、陸達(dá)，2001；師書恩，2001）。網(wǎng)絡(luò)課程作為特殊的教育軟件，這些評(píng)價(jià)方法也同樣適用。經(jīng)過對(duì)各種方法的比較，參照有關(guān)研究文獻(xiàn)，我們?cè)诒緲?biāo)準(zhǔn)中采用了指標(biāo)體系評(píng)價(jià)法，因?yàn)榉治鲈u(píng)價(jià)法受參評(píng)人員的主觀影響較大，對(duì)參評(píng)人員的素質(zhì)要求較高，觀察評(píng)價(jià)法和實(shí)驗(yàn)評(píng)價(jià)法需要投入很多的物力和人力，比較耗費(fèi)時(shí)間，不便于對(duì)大量網(wǎng)絡(luò)課程進(jìn)行評(píng)價(jià)。指標(biāo)體系法是目前國內(nèi)外各種網(wǎng)絡(luò)課程（課件）評(píng)價(jià)標(biāo)準(zhǔn)采用最多的一種評(píng)價(jià)方法，如美國培訓(xùn)與發(fā)展協(xié)會(huì)（American Society of Training and Development, ASTD）的E-learnig課件認(rèn)證標(biāo)準(zhǔn)（The ASTD Institute E-learning Courseware Certification (ECC) Standards）、高級(jí)分布式學(xué)習(xí)（Advanced Distributed Learning, ADL）實(shí)驗(yàn)室的網(wǎng)絡(luò)教學(xué)的設(shè)計(jì)與評(píng)價(jià)指南（Guidelines for Design and Evaluation of Web-Based Instruction）、網(wǎng)絡(luò)教學(xué)資源的應(yīng)用評(píng)價(jià)（劉成新，2000）和網(wǎng)絡(luò)課程績效評(píng)價(jià)指標(biāo)體系（熊才平、吳瑞華，2001）等，這些標(biāo)準(zhǔn)及相關(guān)研究都使用了指標(biāo)體系評(píng)價(jià)法。

3．標(biāo)準(zhǔn)評(píng)議方法的選擇

我們采用德爾菲法對(duì)所制定的網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)進(jìn)行專家評(píng)議，建立共識(shí)，以保證標(biāo)準(zhǔn)的合理性、代表性、權(quán)威性。德爾菲法的一般流程為：（1）確定預(yù)測(cè)問題，選擇專家組；（2）制定與發(fā)送第一輪問卷；（3）回收第一輪問卷，整理結(jié)果；（4）把第一輪問卷的統(tǒng)計(jì)結(jié)果附在第二輪問卷上發(fā)送給第一輪問卷的專家組；（5）回收第二輪問卷并整理結(jié)果；（6）此時(shí)若專家意見差異較大，則進(jìn)行第三輪、第四輪……問卷調(diào)查，在不斷的反饋與修改中使專家意見趨于一致而獲得最終的預(yù)測(cè)結(jié)果；（7）調(diào)查結(jié)果處理。

（一）初步的網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)

基于對(duì)國內(nèi)外大量網(wǎng)絡(luò)課程的分析，參照ASTD的E-learning課件認(rèn)證標(biāo)準(zhǔn)、ADL的網(wǎng)絡(luò)教學(xué)設(shè)計(jì)與評(píng)價(jià)指南以及其他相關(guān)標(biāo)準(zhǔn)和研究文獻(xiàn)，我們提出了網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)的框架和初步指標(biāo)體系，包括四個(gè)維度：（1）課程內(nèi)容（8條標(biāo)準(zhǔn)）：指課程內(nèi)容本身的學(xué)術(shù)質(zhì)量和組織結(jié)構(gòu)，這是決定網(wǎng)絡(luò)課程質(zhì)量的核心要素；（2）教學(xué)設(shè)計(jì)(17條標(biāo)準(zhǔn))：指對(duì)課程的教學(xué)目標(biāo)、教學(xué)過程及教學(xué)測(cè)評(píng)方法的合理設(shè)計(jì)，這是決定網(wǎng)絡(luò)課程質(zhì)量的關(guān)鍵，是網(wǎng)絡(luò)課程區(qū)別于一般網(wǎng)絡(luò)軟件的特殊維度；（3）界面設(shè)計(jì)(10條標(biāo)準(zhǔn))：指對(duì)學(xué)習(xí)者與網(wǎng)絡(luò)課程系統(tǒng)之間的信息交流方式的設(shè)計(jì)，簡便易用的人性化的界面設(shè)計(jì)是決定網(wǎng)絡(luò)課程質(zhì)量的另一個(gè)重要因素；（4）技術(shù)（5條標(biāo)準(zhǔn)）：指技術(shù)的可靠性、適當(dāng)性和兼容性，這是網(wǎng)絡(luò)課程質(zhì)量的前提和基本保障。各條標(biāo)準(zhǔn)的描述方式如表1所示。