1引言

随着互联网的迅猛发展，网站的普及很快，截止到2005年6月底，据中国互联网络信息中心(CNNIC)的统计，我国共有网站677500个，网民1.03亿人。网民上网以学习与知识浏览为目的的占10.3%，对网上学习服务的总体满意度为89.1%。各高等院校网站建成率接近100%，并且涌现出一大批教学网站。在此背景下，国内外许多学者纷纷开始了网站评价研究，高职院校在教学上有其自身的特点，建立高职院校教学网站评价体系，有利于评价高职院校教学网站水平，提高教学效果，对目前教育部进行的精品课程建设也具有一定的借鉴作用。

美国英国等互联网发达国家，网站的评价主要是给出定性的指导思想，研究方法比较典型的有WebMAC方法。徐世浩（2004）^[1]进行了中美两国教育网站的比较。我国许多学者也进行了网站的评价工作，涌现出一批成果，研究成果主要集中的两个方面，一是教育网站的评价，二是教学网站的评价，前者包括后者，但范畴要广得多。顾琼莹、周树红（2004）^[2]对中国教育网站进行了调查，分析了存在的问题，其研究成果对了解我国教育网站的宏观状况具有借鉴意义；周梅群、吴华（2004）^[3]研究了教育网站评价指标体系，其研究成果带有通用网站评价性质；律原、荣燕（2002）^[4]探讨了远程教育网站的评价问题，给出了指标体系，其指标体系的权重完全相等，不尽科学。王丽珍（2005）^[5]研究了信息技术与研究性学习整合专题学习网站的评价问题，在指标体系构建方面也存在通用性强的不足。王海燕、鲍洪晶（2003）^[6]运用统计加权方法从一般性角度对教学网站进行了评价实践，建立了评价指标体系。

综上所述，教学网站的评价已经成为学者研究的热点，取得了一批成果，但在指标体系的选取方面科学性不够，部分学者用教学评价指标代替评价网站指标，在权重的赋值也带有较大的随意性。对于高职院校教学网站的评价领域还极少有学者进行研究。

高职院校教学有其自身的特点，有必要专门进行研究。高职院校生源质量一般低于本科院校，培养目标是为了培养应用型技能人才，理论知识不要求系统化，以够用为度，重点是技能培养，强调动手能力，要求面向社会需求进行专业设置。除了假期和实习，学生能和老师经常沟通，这点又与远程教育为主的教学有很大的不同。此外，高职院校教师几乎全部是教学为主型教师，应该强调教研，适当弱化科研。明确高职院校的这些特点是为了进一步搞好高职院校教学网站的评价。

2、高职院校教学网站评价的原则

    明确高职院校教学网站的评价原则是建立指标体系的前提条件，根据高职院校的特点，特制定以下原则。

2.1内容为主，形式为辅原则

教学网站的目的是为了教学，内容是第一生命力，能够按照教学的目的和要求安排各种知识点，背景知识是否丰富，内容是否合理等是最重要的。但是，仅有内容是不够的，能否考虑到青年学生的兴趣爱好，在网站内容的编排、色彩的设计、动画的使用方面进行科学搭配同样不能忽视。

2.2全面性原则

教育现象的复杂性决定了评价指标体系的多因素、多层次性。要对教育网站的各方面进行不同层次的全方位评价，不能以偏概全、以局部代替整体，同时还要抓主流、抓本质。要求各指标有相对独立性，能协调一致，从不同侧面反映目标的要求，切忌相互矛盾和冲突；同时又不能重复和出现等价指标，造成重复评分现象。

2.3客观性原则

客观性原则要求评价者有严谨的科学态度，评价的手段、方法有充分的科学依据，评价指标体系有准确的含义和理论基础。在指标体系的选取上，尽可能选择一些客观的指标，最大限度地降低主观指标的数量。如不宜选取网站是否经常更新这个指标，其模糊性太强，究竟多长时间更新是经常？应该用具体的时间加以界定，如2周以内、4周以内、8周以内、9周以上。

2.4 可操作原则

教学网站评价必须具有较强的可操作性，指标体系的界定概念清楚，不能有任何歧义。指标数据的获得方法简便易行。同时，评价又必须注意一定的灵活性，如对于有技能要求的课程，应该采用部分反映技能教学的指标，而对于无技能要求的课程，则应减少这部分的指标。

2.5 稳定性原则

    教学网站评价体系一旦建立，必须具有相对稳定性，如不同专家根据该指标体系对同一个教学网站的评分结果应该接近。在网站不作重大更新前提下，不同时间对同一网站的评分结果也应该比较接近，如暑假期间的评分结果应该和学期中间结果一致，不用把浏览量作为重要指标。

3指标的选取

    根据高职院校教学网站的评价原则，共设计5个一级指标，20个二级指标。

3.1知识结构

根据教学内容特点，该课程是理论课程还是实践课程，或者是既有理论课程也有实践课程。对于理论课程，重点考察理论知识的披露程度，对于高职院校的教学网站，其理论知识的披露程度以可以自学为度，过分深奥或过分浅显都不可取。对于实践性课程，要重点考察能否根据网上教学资源进行操作，说明书是否浅显易懂，注意事项是否披露，必要时要辅以操作录像。

3.2网站内容

教学网站的内容是多姿多彩的，但从根本上看，它们有着一定的共性，在网站内容的编排上也是有规律的，设计如下7个二级指标：

1、教学文件：包括专业教学计划、课程教学大纲、教材等文件。考察教学计划及大纲的科学合理性，教材选用是否是近3年内出版的高职专用教材，总体质量情况等。因为如果教学文件存在缺陷，那么在该文件指导下的教学网站及相关知识点必然存在欠缺。

2、知识背景：课程与学科的背景知识，包括重大事件，相关知识，基础技术、案例分析等内容，对高职教育而言，尤其强调基础知识、案例等方面的教学。

3、教学内容：包括教学课件、备课笔记、授课录像等。

4、测验测试：包括作业布置、单元测验和综合测验等，有无自动评分系统等。

5、学习论坛：是否有论坛，是否有网上答疑，论坛是否有专人进行维护，论坛讨论内容质量等等。

6、横向交流：是否包括主要同行及相关重要网站的链接，如行业协会，相关教学网站链接，相关实训场所链接等。

7、教学团队：教学团队年龄知识结构，总体实力，教学研究科学研究成果等，对于高职院校教学而言，教研比科研更重要。

8、内容组织：网站内容组织是否科学合理，详略得当。

3.3、网站技术

1、导航及检索：是否有网站导航功能，便于学生寻找相关知识；是否有全文检索功能，可根据标题或内容进行全文检索。

2、网站速度：网站速度如何，可以采取一周的平均大文件下载速度指标。

3、链接正确率：是否有无法打开的链接，用链接正确网页个数与网站总链接数之比表示。

4、安全可靠性：网站是否稳定，是否经常出现无法打开的情况。

5、知名度：作为教学网站，一般高校在立足本校教学的同时，应考虑到其它高校及其它相关人员学习的需要，因此网站知名度非常重要，可以通过各大搜索引擎能否检索到该网站作为衡量指标，不适合采用浏览量等指标。

3.4、网站动态性

    网站动态性是衡量网站交互的重要指标，没有交互，教学网站就失去了存在的价值。

1、内容更新：网站内容是网站的生命力，如果不经常更新内容，网站的吸引力则会大大降低，可采用平均更新间隔天数指标。

2、交互答疑：有无答疑功能，答疑速度及质量如何，可根据邮件回应、论坛答复情况进行评价。

3.5、艺术性

网站的艺术性是相当重要的内容，具有艺术品味的网站能吸引学生，起到较好的教学效果，可采用如下二级指标表示：

1、色彩搭配：这是主观指标，一般应根据课程内容选择相应的搭配色彩。

2、动画效果：由于网站的浏览者主要是学生，因此应设计出活泼充满动感的网站。

3、整体协调：网站在色彩、动画、文字、内容、图片、声音等元素之间的综合协调情况。

4、指标权重的确定

教学网站测评指标体系反映测评对象的质量水平状况和特征，而每一测评指标的变化对教学网站指数变化的影响程度是有所不同的。反映影响程度的重要性尺度是权重。为了明确各项指标在测评指标体系中所具有的不同的重要性程度，需要分别赋予各项指标以不同的权重数。权重确定与分配是测评指标体系设计中非常关键的一个步骤，对于能否客观、真实地反映顾客满意度起着至关重要的作用。

4.1 层次分析法

层次分析法^[7]（Analytic Hierarchy Process，简称AHP）是对一些较为复杂、较为模糊的问题作出决策的简易方法，它特别适用于那些难于完全定量分析的问题。它是美国运筹学家T. L. Saaty 教授于70年代初期提出的一种简便、灵活而又实用的多准则决策方法。

人们在进行社会的、经济的以及科学管理领域问题的系统分析中，面临的常常是一个由相互关联、相互制约的众多因素构成的复杂而往往缺少定量数据的系统。层次分析法为这类问题的决策和排序提供了一种新的、简洁而实用的建模方法。

运用层次分析法建模，大体上可按下面四个步骤进行：

（1）建立递阶层次结构模型；

（2）构造出各层次中的所有判断矩阵；

（3）层次单排序及一致性检验；

（4）层次总排序及一致性检验。

层次结构反映了因素之间的关系，但准则层中的各准则在目标衡量中所占的比重并不一定相同，在决策者的心目中，它们各占有一定的比例。要比较n个因子 对某因素F的影响大小, 通常采取对因子进行两两比较的办法,建立成对比较矩阵。设a_ij表示因子B_i和B_j对因素F的影响大小之比,再设矩阵 ，称A为判断矩阵或成对比较矩阵。显然，矩阵 A具有性质：

；    (i,j=1,2,…,n)                  （1）

满足这两个性质的矩阵称为正互反矩阵。根据心理学的研究结果,若分级太多，则会超越人们的判断能力,因此通常用数字1～9及其倒数作为矩阵 A的标度（表1）。

表1 判断矩阵的相对重要程度

由于客观世界的复杂性以及人类主观判断差异，每一个判断难以达到完全一致，需要对各判断矩阵进行一致性检验，因此，层次分析法中引入判断矩阵最大特征根以外的其余特征根的负平方值作为判断矩阵的一致性的指标：

                           （2）

为了检验不同的判断矩阵是否具有一致性，同时引入判断矩阵的平均随机一次性指标RI值，对 ，Saaty给出了表2的 值。

表2 平均随机一次性指标RI

计算一致性比例 ：

                             （3）

当 时，认为判断矩阵的一致性是可以接受的，否则应对判断矩阵作适当修正。

对层次总排序也需作一致性检验，这是因为虽然各层次均已经过层次单排序的一致性检验，各层对比较判断矩阵都已具有较为满意的一致性。但当综合考察时，各层次的非一致性仍有可能积累起来，引起最终分析结果较严重的非一致性。

总排序随机一致性比例为：

                        （4）

类似地，当 时，认为层次总排序结果具有较满意的一致性并接受该分析结果。

4.2 德尔菲法

德尔菲法也称为专家打分法，主要用背对背的判断代替面对面的会议,即采用函询的方式，依靠调查机构反复征求每个专家的意见，经过客观分析和多次征询反覆，使各种不同意见逐步趋向一致。

4.3 计算结果

课题组联系了有关高校教育学、信息经济、图书情报等专业的7位教授与博士，让他们单独对指标的重要性进行设置，然后采用Expert Choice公司的Expert choice Trial  11.1.3202软件进行计算，该软件能方便地根据层次分析法的原理迅速计算出指标体系中各指标的权重，并进行一次性检验。一轮结束后，将结果匿名反馈给所有专家，让他们继续进行调整，如此经过三轮循环以后，意见趋于一致，结果如表3 所示。

从结果看，一级指标中网站内容权重最高，其次是知识结构和网站动态性，网站设计与艺术性权重最低。总体上，内容重于形式。总排序随机一次性比例为0.05＜0.1，检验通过。

从知识结构看，理论知识比实践环节重要，如果是单纯的理论或实践课程，应灵活设置权重。从网站内容看，教学内容、学习论坛、教学团队占有较高的权重，体现了教学、师资以及交互的网站教学原则。从网站设计看，安全可靠及知名度占有较高的权重，说明网站首先要保证能够检索到行能够打开，这是非常重要的基础。从网站动态性看，网站更新与反馈同等重要。从艺术性看，整体效果与色彩搭配权重最高。所有二级指标的单排序一致性检验全部通过。

表3 重要程度划分表

5小结

根据高职院校的教学特点，从内容、形式、交互性等方面进行网站的全方位评价，克服了过去教学网站评价中单纯重形式的弊病。在指标权重设定上，通过层次分析法结合德尔菲法进行分析，最大可能减少了随意性，更加科学合理。网站评价没有通用模式，不同行业、不同性质的网站评价方法完全不同，应根据某类网站的内容进行个性化评价。

参考文献：

[1]徐世浩. 中美两国高等学校教育网站比较研究[J]. 中国电化教育，2004（2）：62～66

[2]顾琼莹、周树红. 目前国内教育网站现状的调查与分析[J]. 中国电化教育，2004（4）:43～45

[3]周梅群、吴华. 教育网站评价指标体系设计之研究[J]. 开放教育研究，2004（2）：55～57

[4]律原、荣燕. 远程教育的特点与教学网站的评价[J]. 中国远程教育，2002（2）：62～64

[5]王丽珍. 信息技术与研究生学习整合专题学习网站评价体系的设计[J]. 中国电化教育，2005（2）：81～83

[6]王海燕、鲍洪晶. 教学网站有效性评价问题研究[J].现代教育技术，2004（4）:28～33

[7]SAATY T L, 许树柏等译.层次分析法[M].北京:煤炭工业出版社,1988.

2008.5.5 俞立平 于邗上