短信预约提醒成功
(1)指标重要性的判别
在综合评价过程中,各个指标所起的作用是不同的。为了评价的客观性,通常需要对不同的指标赋予不同的权数,由于权数的大小反映的是指标重要性的大小,所以又常被称为重要性权数,或称为权重。
指标在评价中的重要性主要可以从以下几个方面进行综合判别:
① 指标的综合性。指标的综合性是指指标所反映的信息量的多寡。
② 指标的敏感性。
③ 指标的独立性。
④ 指标的可信度
(2)确定权数的方法和步骤
在综合评价中,通常需要将定性方法和定量方法结合在一起应用,单凭定性方法或单凭定量方法往往得不到较好的效果。以下根据近年来综合评价实践过程中定性方法与定量方法结合应用的经验,介绍确定权数的方法基本和步骤。
第一步,确定指标重要性的量化标准。
一般常用A.L.Sarry的1-9比率标度法(以下简称比率标度法)作为确定指标重要性的标准,对指标的重要性进行量化。
比率标度法主要是基于人们在估计事物的质的区别时,一般可以用5种判别很好地表示出来,当需要更高的精度时,还可以在相临判别之间做出比较,从而形成9种判别,用数量表示就是9个标度
第二步:老师评判
老师评判一般常用的方法为德尔菲法。其特点是依靠老师的经验来确定指标的重要性,并在不断的反馈和修改中得到比较满意的答案。在综合评价中运用德尔菲法的步骤如下。
① 将指标及有关资料(包括对统计分析目的的说明),以及由第一步确定的重要性的量化发给选定的各位老师,请他们独立地给出各指标的重要性权数。如果老师对指标体系中的某些指标感到十分不满意的话,请他们提出自己认为理想的替代指标。
② 分别计算各位老师对同一指标所给予的重要性权数的均值和标准差,以观察各位老师对指标重要性权数赋值的一般水平,并判断老师意见的集中程度。
③ 将计算结果及其他老师的意见(匿名)返还给各位老师,并请各位老师进行以下工作:
* 要求所给重要性权数与均值的偏差较大的老师说明原因;
* 要求对其他老师提出的指标重要性权数赋值、修改或变更指标的建议发表自己的看法;
* 要求所有老师在考虑以上问题的基础上重新确定权数。
④ 重复②、③两步,直到获得较为满意的结果(各老师所给权数趋于一致)为止。
带有信任度的德尔菲法与普通德尔菲法的区别在于:老师在确定重要性权数的同时,还要给出每个指标的信任度,为使用者提供更多的信息。该方法需在每位老师给出最后权数值的同时,各自标出所给权数值的信任度,并在集中后求出平均信任度。这样,当一个指标的信任度较高时,就可以有较大把握使用它。如果一个指标的信任度较低,则只可暂时使用,待实践中再加以改善。
老师评判法的优点:
① 集思广益,集中了各位老师的智慧。
② 老师之间背靠背独立地工作,相互不受影响。
③ 具有一个有条不紊的“集中-反馈-集中”的系统。