[国内教育网站评价研究概述] 三角贸易的概述和评价

  [摘要]随着计算机及因特网的发展和普及,教育网站作为一种现代化的教育手段和媒介,承载着教育资源共享、信息传播等多重任务。由于缺乏行业规范,教育网站的质量参差不齐,如何对教育网站进行评价以规范教育网站建设提升教育网站质量日渐受到人们的重视和关注。众多研究者从不同的角度利用不同的方法对教育网站评价进行了研究,但仍未形成统一的标准。基于此,文章对当前国内教育网站评价研究的文献进行了总结分析,并讨论教育网站评价的特点和发展趋势。
  [关键词]教育网站;评价;定性;定量
  [中图分类号]G420 [文献标识码]A [论文编号]1009-8097(2011)01-0107-05
  
  一 引言
  
  随着计算机网络的普及,我们面临网络资源泛滥的危机,网络资源的质量评价日益上升为信息资源管理的热点之一。其中,作为网络信息资源的节点,各类网站承载并传播着大量信息,网站评价在规范网络秩序,提高网络信息的质量以及对引导用户选择有效资源和信息等方面发挥着重要作用,因此受到越来越多的关注。在教育资源领域,教育网站种类繁多、建设主体各异、水平也参差不齐,如何对教育网站进行评价以提升其质量和效益也成为一个值得关注的问题。
  目前教育网站的内涵还没有统一的定义,不同的研究者持有不同见解。此外,教育网站作为一个网站类型,旗下包括了各种子类别的教育网站。因此,关于教育网站的评价,目前仍然没有形成统一的标准,研究者依据不同的方法从不同的角度对教育网站评价进行了研究。
  本文试图通过文献调研和内容分析的方法,从国内教育网站评价方法和指标对教育网站评价现状进行概述,并讨论教育网站评价的不足以及它的发展趋势,以期为选择正确的教育网站评价方法提供决策支持,同时启发研究者开发新的教育网站评价方法。
  
  二 教育网站评价概述
  
  1 教育网站内涵
  关于教育网站的内涵,学者们从自己的角度对其做出了诠释。早在2000年教育部颁发的《教育网站和网校暂行管理办法》中将教育网站定义为:“教育网站是指通过收集、加工、存储教育信息等方式建立信息库或者同时建立网上教育平台与信息获取及搜索等工具,通过互联网服务提供单位(ISP)接入互联网或者教育电视台,向上网用户提供教学和其他有关教育公共信息服务的机构”;教育网校的定义是:“教育网校是指进行各级各类学历学位教育或者通过培训颁发各种证书的教育网站”。而彭绍东和周鸿彬等学者认为,教育网站是以提供教育服务为主的网站,这是区别于“商业网站”、“政府网站”等其他类型网站的特征所在,教育网站可从建设者、服务层次、服务对象、服务范围、网站规模和网站管理级别等不同维度进行分类。可以看出彭绍东等人对教育网站的理解囊括了教育部定义的教育网站和教育网校。
  还有部分学者将普通高校的门户主页视为教育网站。笔者认为,一般意义上的高校站点主页以提供消息或新闻类信息为主。以北京大学主页为例(www.pku.省略),该主页主要包含“北大新闻”、“通知公告”以及分站点链接等几部分内容,没有直接提供教育服务,所以本文在论述教育网站评价相关内容时没有将之考虑在内。
  2 教育网站评价现状
  笔者在对教育网站评价相关文献进行检索时发现,除了“教育网站”还存在关键词“教学网站”。按照“教育网站是以提供教育服务为主的网站”的观点,笔者将教学网站归于教育网站,并于2010年6月6日以“题名=教育网站/教学网站+评价”和“关键词=教育网站/教学网站+评价”为收索条件,利用CNKI学术文献总库进行检索,剔除重复结果以及高校门户主页评价,得到相关文献29篇。
  CNKI是国内学术文献收录较为权威的数据库,这些搜索结果涵盖了国内与教育网站评价直接相关联的大部分文献。其中最早的文献是李忠信于2001年发表的《关于教学网站有效性的评价》,可以推测,国内教育网站评价始于2001年左右。此外文献的总数并不多,说明教育网站评价的研究有待进一步丰富。下面是对部分文献的简要回顾:
  《关于教学网站有效性的评价》一文引入了WebMac(websites motivation analysis checklist),侧重测量网站的有效性和激发性,从这两个维度构建了网站的指标评价体系。
  《教学网站的评价》一文指出教学网站的评价主要是针对教学网站教学设计的合理性、教学内容的覆盖范围、网站的受访率、导航有效性、稳定性、适用性等方面来进行的。以构建指标体系的方法描述了对教学网站的评价。该指标体系包括:教学特色、技术特色和网络特色三方面,并以加权综合评判法对这些指标赋以权重。其中教学特色主要包括教学目标性、内容正确和结构合理等;技术特色包括网站的功能、性能和界面设计等;网络特色包括了访问量、注册用户量、页面停留时间等。
  《教学网站有效性评价问题研究》着眼于对教学网站有效性(教学网站为适应社会需求及学生个体素质发展需要进行的各种教学活动所达到的预期效果的程度)的考察,并从教学内容、学习支持服务系统、办学条件、教师和学生五个一级指标以及若干二级指标构建了网站评价指标体系。在结果的处理上,采用了指标加权的形式将其量化以便于对评价结果的处理。
  《基于WCAG标准的国家精品课程教学网站技术测评研究》利用网络诊断工具WebXact按照W3C(万维网联盟)的WCAG(网络可读性指导标准)和质量检测(加载时间、更新、连接数目、无效连接、风格化分栏、服务器方映像地图、内嵌多媒体个数和元数据个数)对部分精品课程网进行了评测。
  《教育网站评价指标体系设计之研究》以整体完备性、科学合理性、简易可行性为原则,根据教育网站的内容以及网站信息资源的特点、听取多方意见,再经过确立指标――各指标项权重的分配――编制指体系三个步骤,将指标体系分为:内容评价、技术性评价、效用性评价和发展性评价四个一级指标,以及若干二级和三级指标,其中内容评价权重最大。
  《我国综合性基础教育网站评价》以基础教育网站为研究对象,分析了基础教育网站的含义及其职能,确定了网站评价的3大方向:是否容易使用,内容评价和网站总体印象以及18个具体标准。
  《中小学教育网站评价指标体系研究》以中小学教育网站为评价对象,从中小学教育网站的资源产生、组织、传递、使用的角度着手,通过调查法、文献法和实验法并听取多方意见,确立了中小学教育网站的内容、技术、用户及效益四个一级指标以及若干二级和三级指标。其中隶属于用户的详细指标包括了:用户访问总数、注册总数,会员比例、用户在网站停留的时间、浏览页面的数量、下载页面的数量等。
  《教育网站易访问性的设计和评价》描述了各国家地区和组织机构对于网站易访问性的含义,并从媒体元素易访问性、元信息易访问性、教育教学信息组织的易访问性和总体易访问程度四个维度考察教育网站的易访问性。对这些一级 指标的下属详细指标进行归纳,主要包括网站技术(程序代码和建站技术的规范性等)、页面展示(图像、文字动画等)和信息(准确性、覆盖面和深度等)三个方面。
  《数学教育网站评价指标体系的设计与建构》一文的指标体系来源于国内外网络教学评价、信息资源评价和教育软件评价等方面的成果以及各种文献和评价机构,作者通过分析和总结,将一级指标体系分为:内容、技术、教学、数学、艺术和发展性几个维度。这些一级指标又包含若干二级和三级指标,同时作者使用了统计加权法确定了各指标的权重。内容维度占各指标权重最大。随后作者在《我国教育网站评价存在的问题及评价指标体系的初步确立》一文中针对综合类教育网站给出了内容、技术、教学、艺术和发展性五个维度的评价指标。
  国内学者陈向东在《基于流量分析的教育网站评价》和《一种新的教育网站评价方法:链接分析》两篇文章中引入了两种教育网站定量评价方法:基于流量的分析和链接分析法。《中国教育信息化》期刊利用Alexa排名公布了“中国省级教育信息网站排行榜”。
  3 教育网站评价的总体特点
  从上述文献的描述中可以看出,当前教育网站评价的方法主要是通过建立一系列指标体系即评价标准,然后通过各种方法将之量化。这些指标体系的划分方式按照其指标数据的收集方式可以划分为定性评价和定量评价两种:定性评价的指标数据来源由人工辅助的方式产生,具有一定的主观性和局限性,定量评价的指标数据由软件自动记录产生,较为客观,其指标结果均为可量化的数据。由于网站评价中的许多指标难以量化,或只能进行有限的量化,所以借助人工方式的定性评价较为普遍。
  此外,部分学者在建构指标体系时,在同一个指标框架中既包括需要人工参与评价的定量指标,也包括了非人工干预方式产生的站点使用情况的客观数据,如访问量、页面停留时间等,但类似这样将定性和定量指标相融合的文献所占比例很小。
  
  三 定性方法在教育网站评价中的应用
  
  定性评价首先需要构建网站评价的指标体系,在进行指标体系的构建时非常重要的一点是需要寻找合适的理论依据或方法,作为建构评价指标体系的基础,进而对指标体系数据结果进行量化处理。
  1 指标体系的构建方法
  一个完整的指标体系包括具体的分级指标和指标权重。在建构分级指标时,教育网站评价最为常见的方法包括:总结文献法、专家法等:建构指标权重的常见方法有:层次分析法(APH)、加权综合评判和模糊综合评判等方法。
  总结文献法通过广泛的阅读和归纳文献,提炼出一些常见的指标,集众之所长。但总结文献是基于归纳总结得出的指标体系,缺乏理论支撑,其科学性如果不加以验证,那么其仅仅代表了一种个人观点,不具有实践的操作意义。
  如何遵循比较规范的方法来构建指标体系?实践中,在文献研究基础上,综合运用专家法和层次分析法,可以大大增强指标体系的科学性。专家法的应用在于,将体系中的若干指标(范围较宽泛)按照某种体系结构,广泛调查、征求专家意见,最终得到关于各类指标的专家认同度。这样,个人观点在与专家广泛交流后获得了一种认可和修正,观点则趋于科学和普适。
  配合层次分析法或其它量化方法来将复杂的决策系统层次化,通过逐层比较各种关联因素的重要性为分析、决策提供量化的依据,一方面便于评价结果的量化和处理,另一方面也增强了指标体系的科学性和规范性。
  此外,利用评价教学软件和信息资源领域的评价等理论或模型是教育网站评价建构指标体系的另一种方式:因为教育网站起步时间晚,对其评价的研究成果少,而教学软件或者信息资源领域的相关评价理论已较为成熟,所以部分学者将之迁移至教育网站的评价当中。
  2 指标体系的选择
  在总结众多学者的定性评价指标体系时,笔者发现,学者在建构或选择具体的指标体系时,有以下几个倾向:
  (1)从网站内容出发
  众多学者在建构指标体系时,发现网站内容的指标权重最大。网站内容是用户关注的主要内容,也是可以实际获得信息的媒介,因而网站内容的优劣,从本质上决定了网站质量的高低。网站内容往往又可以细分为:内容的准确性、主题相关性、全面性、时效性等方面。内容准确性要求网站规范、符合实际,具有教学价值;主题相关性要求网站内容和网站主题密切联系,即“符合题意”;全面性则要求网站的信息量丰富;时效性要求网站内容的及时更新,信息符合当前潮流。
  教育网站的内容是其区别与其它类型网站的根本特征之一,因此教育网站内容安排是否得当与该教育网站的质量密切相关。
  (2)从网站设计(布局)出发
  网站的设计包括色彩搭配、布局、吸引力等多个方面。它是网站的外在表现形式:以什么样的方式呈现内容、布局和功能设计是否符合用户习惯,各种网络媒体的使用是否合理等。好的网站设计有助于推广站点和吸引用户,从而提升网站层次和质量。
  (3)从网站技术出发
  网站技术包括检索、加载速度、稳定性等多个方面。信息检索的命中率和准确性是用户是否能找到所需信息的重要保障;页面的加载速度如果超过了用户承受的心理,则势必影响该站点的访问和使用;好的站点需要一个稳定的性能,在一定的工作周期内能够承受一定的访问负荷。
  (4)侧重研究某一项内容
  根据教育网站类型和需求的不同,研究者会选取网站评价中某一个内容或角度进行重点研究,如针对教育网站可访问性的研究,重点考察媒体、元信息、教学信息组织和总体易访问性等内容。教育网站的有效性则重点关注网站为适应社会需求及学生个体素质发展需要进行的各种教学活动所达到的预期效果的程度。
  
  四 定量评价方法在教育网站评价中的应用
  
  理论上,有明确体系的定量方法主要是程向东引入的“基于流量分析”和“链接分析”两种。实践上,《中国教育信息化》期刊利用Alexa排名公布了“中国省级教育信息网站排行榜”。定量评价和定性评价的最大区别在于,定量评价的指标数据较为客观,它们往往由软件或者其它非人工直接干预的方式产生,排除了人为主观因素的影响。
  1 定量评价方法及其指标内容
  (1)基于流量的分析方法
  依据陈向东的观点,教育网站定量评价中基于流量分析的指标可总结为访问数、页面预览、页面停留时间、用户的IP和用户的入站路径等多个方面。访问数量体现的是网站的访问量,即网站被接受程度;页面停留时间可以分析出用户的兴趣点:停留时间越长,说明用户对该页面的内容越感兴趣;用户的IP则显示用户的来源,可以分析站点使用人群的特点;用户的入站路径除了可以分析用户来源以外还可以获取通过搜索引擎入站用户的搜索关键词。
  这些指标体系的信息可以从WEB服务器的日志文件中获得,所以有些学者也将之称为“基于WEB挖掘(WebMining)”或“基于WEB 日志分析”的网站评价方法。由于WEB服务器日志属于本地文件,其内容易被篡改,因此基于 WEB日志的指标数据缺乏较强的可信度,但由于其使用灵活,定制方便,仍被广泛使用。除了通过WEB日志获得指标数据外,还可以通过在WEB页面添加第三方脚本来进行统计。添加第三方脚本的缺点是对网站系统的运行效率有所影响,但它能获得更多的用户信息,并且由于属于第三方认证,可信度较高。
  (2)链接分析法
  链接分析源自网络计量学。链接分析法,顾名思义,和“链接”一词有关。该方法的评价指标通常包括:入链(Inlink)、出链(Outlink)、自链(Selflink)、链接密度(LinkDensity)和网络影响因子(Web Impact Factor)。入链表示一个站点的网页或资源被其它站点通过超链接方式的引用数量,它反映了一个站点的质量,通常认为,入链越多,该站点质量越高,越受欢迎;出链表示一个站点链向外站的连接数量,它们可以反映网络的开放程度和网络空间分布结构;自链表示一个站点链向自己的链接数量,适当的自链可以优化站点层次结构和逻辑关系;链接密度是表示站内链接出现频度的指标,它能消除因网站规模导致的其它指标绝对数值差异较大的影响。
  网络影响因子(WIF)=(链入+自链)/网站页面数,它是用来衡量网站质量的重要指标。其理论依据是一个网站被另一个网站所链接是对该网站的赞许和利用,一个网站的链接比例是衡量该网站质量和影响力的重要指标。在文献计量学中与网络影响因子相近的概念是期刊的影响因子,被用来衡量该期刊的学术影响力,二者的理论和评价机制较为相似。网络影响因子的另外一个优点在于可以消除因站点规模的大小而导致的评价结果的误差。
  (3)网站跟踪统计法
  所谓网站跟踪统计法是指“利用专业技术或特定软件来长期地、持续地跟踪统计网站运营指标”的方法,常用的有Alexa等工具。Alexa通过安装在用户本机的Alexa工具条来收集用户的访问信息,并以此为数据来源对网站进行排名或评价。
  2 结果的误差考量
  定量评价的指标数据不受人为主观因素的影响,因而较为客观。但在指标数据的收集时由于测量工具的局限性、网站自身技术的屏蔽以及对指标选取不当等因素都可能造成测量结果的误差。由于教育网站定量评价鲜有实际应用,更多讨论的是理论的引进,而在其他类型网站评价中,已有一定数量的定量评价的实践。本文对实践中对定量指标数据收集产生误差的可能性进行了总结,主要包括以下几种:
  (1)测量工具的误差
  目前没有专门开发用于网站定量评价的测度工具,应用较多的是通过搜索引擎收集数据。最常见的搜索引擎包括:Google、百度、AllTheWeb、AltaVista、Fast、NorthernLight等。由于Google和百度没有测量站内链接和站外链接数的功能,所以在许多场合不能使用;部分搜索引擎需要支付一定的使用费用,如NorthernLigh,也限制了它的应用。余下几款搜索引擎被研究者较多的使用,但仍有一定的局限性:如它们作为国外搜索引擎,对中文网页的收录数量有限,而且不同的搜索引擎对同一搜索结果的返回差异较大,即便同一个搜索引擎也会返回不同的结果。例如邱均平等使用几类搜索引擎测量数据时发现Fast搜索引擎对同一个查询条件在翻页时竟然返回不同的、差异较大的查询结果总数;同时AllTheWeb返回数据较AltaVista多,但AltaVista返回结果更加稳定。
  在使用类似Alexa评分一类工具时,由于其数据来源于安装在客户机的Alexa工具条等工具性软件,事实上并不是所有用户都安装了类似工具,因此其数据来源不免有一定的局限性。Alexa官网解释其流量排名时说“每月用户访问少于1000的网站的流量排名难于准确计算”、“一般而言,100,000以上的网站流量排名可以认为不够可靠”、“一个网站越靠近排名第一,它的网站流量排名越准确”,因此类似Alexa的排名机制对访问量巨大的站点才有一定的参考价值。
  (2)网络技术屏障
  网络技术屏障主要是指网站建设者使用了不便于收集数据的建站技术或者对相关数据收集工具进行了技术屏蔽。该类技术影响最典型的是通过专业爬行工具对站点链接进行广度和深度搜索计算的方法。例如当前互联网上的部分站点为了更加美观和增加交互采用局部FLASH或全部FLASH建站的技术,这就为爬行工具的数据收集设置了屏障,从而导致结果有误差。
  为了获得更快的站点加载速度,网络中存在大量的缓存数据。这些缓存数据包括浏览器缓存、服务器日志、ISP服务器、代理服务器等,缓存为搜索引擎和WEB服务器数据分析带来了一定的麻烦,使得缓存站点的使用状况无法跟踪和计算产生偏差。
  (3)网站建设的影响
  站点建设者在建设网站时对网站内容的规划和布局在一定程度上影响了指标数据的收集。文献《网络计量学实证研究》在计算省级政府网站网络影响因子时发现对同一主题、信息量相当的内容,由于不同站点用来表示该信息的页面数不一样,从而导致了网络影响因子结果的异常。同样,站点内容的改变也是导致数据统计异常的结果之一。
  (4)研究对象的适用性
  网站定量评价指标选择不当是评价结果出现误差的另外一个原因。文献《中国大学网站链接分析及网络影响因子探讨》证明了网络影响因子不适合大学网站的评价,因为大学网站链接更多是学校声誉带来的而非网站质量的高低决定。教育网站在评价过程中也可能遇到类似的问题。
  
  五 讨论
  
  当前教育网站评价呈现以定性评价为主,定量评价为补充,定性和定量评价少有结合的局面。在定性评价中,总体遵循建构指标――赋予权重――进行评价并量化结果的过程,在具体的细节上,研究者们建构指标体系的方法不一,缺乏统一的理论指导,而且细节指标较为混乱;定量评价在理论上已出现2-3种技术,在实际应用中较为少见,通过定量评价在其它类别网站评价的应用可知其指标数据的收集存在一定的误差,有待进一步的完善:在定性和定量相结合方面,定性指标占主导,定量指标作为辅助出现,且总体而言将二者结合的文献仍然较为少见。
  教育网站评价至今还未出现一个统一、健全、信度和效度俱佳的评价标准。在未来的一段时间内,该领域仍然将保持活力。当前急需解决的矛盾是对统一、易操作的教育网站评价标准体系的需求与当前理论多样、指标体系过于个性化的现状;教育网站评价的对象与当前已出现的教育网站类型相比仍然较少,对评价对象的子类别将被进一步划分和研究,所以确立国内教育网站评价统一可行的理论体系是国内教育网站评价的发展趋势。此外,随着定量评价理论的引入,定量评价在教育网站评价中的应用和研究也将进一步发展,当定性和定量评价研究达到一定成熟度时二者的进一步深化和融合是必然趋势。
  
  参考文献
  [1]教育部,教育部关于教育网站和网校暂行管理办法[EB/O L],
  [2]彭绍东,周鸿彬,教育网站的类型与评价[J],远程教育杂志,2002,(6)
  [3]李忠信,教学网站的评价[J],中国电化教育,2001,(3)
  [4]穆肃,关于教学网站有效性的评价[J]电化教育研究,2001,(1)
  [5]王海燕,鲍洪晶,教学网站有效性评价问题研究[J]现代教育技术,2003,(4)
  [6]曹吉鸣,侯剑勃,基于WCAG标准的国家精品课程教学网站技术测评研究[J],远程教育杂志,2007,(3)
  [7]周海群,吴华,教育网站评价指标体系设计之研究[J],电化教育研究,2004,(8)
  [8]邢素丽,曹青,廖红,我国综合性基础教育网站评价[J],教育信息化,2005,(3)
  [9]郑旭,中小学教育网站评价指标体系研究[D],南京:南京师范大学,2005
  [10]张家年,教育网站易访问性的设计和评价[D],金华:浙江师范大学2003
  [11]赵文静,数学教育网站评价指标体系的设计与建构[D]广州:广州大学,2006
  [12]赵文静,曹忠,我国教育网站评价存在的问题及评价指标体系的初步确立[J],电脑知识与技术(学术交流),2007,(21)
  [13]陈向东,基于流量分析的教育网站评价[J],现代远距离教育,2007,(1)
  [14]陈向东,一种新的教育网站评价方法:链接分析法[J]中国电化教育,2007,(7)
  [15]中国教育信息网站排行榜[J],中国教育信息化,2008,(11)
  [16][19]邱均平,陈敬全,段字锋,中国大学网站链接分析及网络影响因子探讨[J],中国软件科学,2003,(6)
  [17]详解Alexa网站流量排名[EBIOL],
  [18]杨涛网络信息计量学实证研究:对国内20个大学网站的分析[J],图书情报工作,2003,(9)
  
  编辑:行知

推荐访问:概述 教育网站 评价 国内