摘要: 网络课程质量评价对远程教育具有重要的意义。科学有效的评价可以实现网络教学的全程管理,正确引导网络教育的发展。由于涉及多方面、多因素,网络课程质量难以度量,本文采用模糊综合评价法解决这一问题。参考了国内外的网络课程质量评价标准,建立了网络课程质量评价指标体系层次分析模型,给出了网络课程质量评价的层次结构和计算方法,并给出了应用实例。
关键词:网络课程;质量评价;层次分析法;模糊理论
中***分类号:G423.1 文献标识码:A
文章编号:1672-5913(2007)08-0037-03
Fuzzy Synthetic Evaluation of Web-Based Course Quality
Zhang Ning-rong1Yan Li2Chen Yi-wang1
(1. Institute of Sciences, PLA Univ. of Sci. & Tech., Nanjing 211101, China;
2. Engineering Institute of Engineering Corps, PLA Univ. of Sci. & Tech., Nanjing 210007, China)
Abstract: The quality evaluation of Web-based course is important to distance education. The scientific and effective evaluation will implement Web-based teaching management during the whole course, and lead healthy development of Web-based education. The Web-based course quality is difficult to measure because it is composed of various attributes, so that this paper applies the fuzzy synthetic evaluation to overcome the difficulty. We refer to foreign and domestic evaluation standards of Web-based course quality, put forward analysis model of hierarchical index system, give hierarchy framework and calculation method, and show application example.
Keywords: Web-based course; quality evaluation; analytic hierarchy process (AHP); fuzzy theory
1 引言
目前,除了***确定的现代远程教育试点院校外,基础教育领域和一些企业单位也开办了面向不同层次学生的网上学习与培训。可以说,网络教学突破了时间和空间的限制,扩展到了社会生活的各个领域,根本性地改变了教育理念和教学模式,并逐渐形成了具有鲜明时代特色的文化。但是,也出现了一些不容忽视的问题,影响了高校网络教育的正常秩序。因此,建立科学合理、综合有效的网络课程质量评价方法,科学地评价网络课程的教学效果和质量,引导网络教育的健康发展,进一步提高整个社会对网络教育的认可度,已经成为一项非常有意义的工作。
从已经开展的网络课程验收工作看,评价工作更多的是对评价指标、评价标准的确定,但是将数学处理的新技术应用到评价中以获得更加合理的评价方法的研究还很少。本文参考了美国和英国的网络课程质量评价标准[1]-[3](见表1),参照了我国***高教司提出的“网络课程质量认证标准”[4],建立了网络课程质量评价指标体系层次分析模型,用层次分析法进行了指标权重的测定,最后用模糊理论进行了网络课程质量的综合评价。这种定性与定量相结合的模糊综合评价方法,使评价的结果更为可靠、准确和客观。
2 建立网络课程质量评价指标体系层次分析模型
2.1 构建网络课程质量评价指标体系的原则
本文参考了国内外的网络课程质量评价标准,定位于质量评价以指导网络教学实践为目的,评价对象不只是网络课程资源(课件),更重要的是网络课程的教学实施方式,包括总体教学设计、资源配备组合、教/学过程和监控评价等问题。综合考虑,我们认为评价因素的确定必须遵循以下原则:
(1)指导性原则。网络办学依然处在发展和探索阶段,以评价促进步、以评价促发展是评价的第一原则。网络课程质量评价指标体系的构建应该体现全面质量观,考虑学生个性化要求,引导学生自主学习,要求高水平的资源支持,充分体现评价的指导性。通过评价,全面、及时地了解系统的运行状态,利用反馈的信息调整***策、策略、方法和手段,使探索尽可能少走一些弯路。
(2)科学性原则。指标体系应该能够突出影响网络课程效果的基本因素,并且是一个完备的评价体系,其内部各项目的表述与结构应该是合理的。评价应当实事求是,不应针对某一弱点,偏向某一环节。
(3)可操作性原则。构成网络课程质量评价体系的项目内容,应该是可以被观察记录下来的现象和行为表现,并且能够被记录和易于评价等级的。指标体系中的各项目的表述应当简洁精练,语言的表述和所用的术语应当规范。
(4)***性原则。构建指标体系时,应从事物的某一个分类基准出发,分解要素项目,各项指标之间必须相对***,每个指标都***地提供信息,不能有重叠关系,避免冗余指标的干扰,保证评价的信度与效果。
2.2 建立网络课程质量评价指标体系层次结构
决定网络课程质量的环节和因素很多,我们将其划分为内容设计、结构设计、过程控制和技术支持4个层次,如***1所示。这样的层次结构既将影响质量的各种因素进行了分解,又将其按一定的结构组织起来,反映了从上往下的构造,也便于数学建模和从下往上的度量。
2.3 利用层次分析法确定评价指标体系的权重
层次分析法(AHP),是20世纪70年代美国著名系统工程与运筹学专家T.L.Saaty提出的针对多层次、多目标规划决策问题的有效决策方法。它可以将人的主观判断用数量形式表达和处理,可以同时处理定量和定性因素。其分析的基本步骤是:
(1)把问题条理化、层次化,构造系统的层次结构模型,用以说明层次间的递阶结构与各因素间的从属关系。
(2)根据1~9及其倒数的标度表,将各层次中的因素两两比较,构造判断矩阵。
(3)层次单排序及其一致性检验。求解矩阵最大特征根(λmax)和特征向量(W),并验证判断矩阵是否具有满意的一致性。
(4)层次总排序及其一致性检验。
对于AHP的具体计算过程和方法,请参阅文献[5]。
2.4 模糊综合评价
这是利用模糊数学中的运算法则,对评价域进行量化综合,从而得到可比的量化评价结果的过程。模糊综合评价模型主要由因素集、评语集和模糊关系矩阵组成,其分析的基本步骤是:
(1)建立评价因素集U。根据上述建立的网络课程质量评价指标体系,本文采用二级模糊综合评价方法。一层因素集记作:UB1 = {UC1,UC2,UC3},UB2 = {UC4,UC5,UC6,UC7,UC8,UC9,UC10},UB3 = {UC11,UC12},UB4 = {UC13,UC14,UC15};二层因素集记作UA = {UB1,UB2,UB3,UB4}。
(2)建立有m个评价结果组成的评语集V,记为:V = (v1,v2,…,vm)。
(3)利用AHP的计算结果,对各因素分配权值,建立权重集,即表示为权向量A = (a1,a2,…,an)。
(4)根据因素集U和评语集V之间存在的模糊关系,建立模糊关系矩阵R。
(5)将因素权向量A与模糊关系矩阵R进行模糊合成计算,将其结果正规化处理,依最大隶属度原则,取正规化向量中最大值为评价等级。
其详细的算法请参阅文献[6]。
3 应用实例
对***1所示的层次结构模型,我们请20位专家组成员、优秀教师、管理人员填写了调查问卷,调查内容包括:各评价指标的相对重要性、软指标统计表(每一项指标下4门网络课程的评语等级),从而获得了原始数据。
采用AHP法计算指标权重的过程是:首先,由原始数据构建了判断矩阵A-B,做了相应的计算,并保证判断矩阵满足一致性;然后,又构建了判断矩阵B-C,包括B1-C、B2-C、B3-C、和B4-C四个矩阵,并进行了权重计算。判断矩阵都具有满意的一致性;最后,由以上单排序的计算结果和***1的层次结构,计算C层相对于A层的总排序,同时计算一致性指标C・I和随机一致性比例C・R,进行了一致性判断,其计算结果见表2。
从表2中的数据可以看出,专家们首先看重的是课程内容的科学性(0.227),其次是丰富的学习资源(0.142)、知识点的讲解(0.125)和作业练习实践环节(0.090)。还有,系统的可靠性(0.069)和课程内容的规范性(0.069)也占有比较高的权重。
为了进行模糊综合评价,我们进行如下的工作:
(1)建立评语集V = {v1,v2,v3,v4,v5},表示{优,良,中,较差,差}5个评价等级。
(2)根据软指标统计表,统计出各评价指标在各个评语等级的得票率,从而确定各评价因素对各评语等级的隶属度向量,得到B层因素集的模糊关系矩阵R。
(3)采用(?,+)模糊算子,将因素权向量A与模糊关系矩阵R进行模糊合成计算,得到B层指标的评价结果。又将它作为A层指标的模糊关系矩阵,继续采用(?,+)模糊算子对系统最顶层A层进行评判,A层的评判结果即为系统的评价结果,它是一个模糊向量。
(4)为了便于排序评优,采用等差向量S = {100,80,60,40,20}表示评语集,S与评价结果相乘,可以得到网络课程的百分制计分。如表3所示,归一化后的综合评价结果。网络课件D的评价结果最好,这与其实际表现相吻合。
4 结论
由于涉及诸多因素,导致网络课程的质量评价在实际操作中难以定量控制。本文根据网络课程质量评价的特点与要求,将专家的经验知识和定量的数学模型结合,提出了基于模糊综合评价和AHP法相结合的网络课程质量评价方法。该方法使定量定性有机结合,可以减少人为因素的影响,增强决策的客观性和科学性。该评价模型,利用面向对象的程序设计可以编写成软件,具有良好的可操作性与实用性。
参考文献:
[1] Phipps & Merisotis (2000). Quality on the Line: Benchmarks for success in Internet-Based Distance Education [Z]. Research report of The Institute for Higher Education Policy.
[2] Guidelines on the Quality Assurance of Distance Learning[J]. Quality Assurance Agency for Higher Education. 1999.3
[3] Guidelines for On-line Course Development and Evaluation[J/OL]. /documents/.
[4] 董艳,黄荣怀,李晓明等.《网络课程课件质量认证标准》的研制与修订[J]. 电化教育研究, 2003(6).
[5] Saaty TL (1980). The Analytic Hierarchy Process. McGraw-Hill Inc, New York
[6] 胡宝清. 模糊理论基础[M].武汉大学出版社, 2004.
作者简介:张宁蓉(1972-),女,江苏南京人,讲师,硕士,主要研究方向为计算机***形学、计算机辅助设计。
电话:13601464565,025-84878772
E-mail:
通信地址:南京市海福巷1号 理工大学***学教研室 210007
转载请注明出处学文网 » 网络教学质量的模糊综合评价