几种绩效评价方法的比较分析
出处:论文网
时间:2007-09-04
三.评价结果的比较分析
上述实证过程的5种排序结果汇总如表7所示:
表7
排序方法 皖通高速 东北高速 中原高速 福建高速 楚天高速 赣粤高速 宁沪高速 深高速
AHP 4 8 3 2 5 1 7 6
灰色 5 8 2 3 4 1 7 6
模糊 5 8 2 4 1 3 7 6
TOPSIS 4 8 3 2 5 1 7 6
因子 5 8 3 2 4 1 7 6
序号总和 5 8 3 2 4 1 7 6
上文实例中各种评价方法所用的评价指标体系、原始数据及其预处理方法均相同,因此表7所示实证评价结果的差异仅取决于评价方法本身,即各种方法从输入原始数据到输出评价结果这一过程的差异导致评价结果的差异。本文对过程差异分析的前提是,因子分析、关联度系数、欧氏距离等所基于的数学理论均是可靠的,均能真实反映了评价对象间客观存在的差异。
为便于比较,将上述五种方法按评价过程中包含主观因素的程度作如下分类:因子分析法属客观评价法,AHP、灰色评价法和TOPSIS为主观评价方法Ⅰ,模糊综合评价属主观评价法Ⅱ。表8所示为各种评价方法得到的排序结果间的Spearman相关系数,系数越大表明排序结果越接近。
表8
排序方法 客观评价法 主观评价方法Ⅰ 主观评价法Ⅱ
因子 AHP 灰色 TOPSIS 模糊
客观评价法 因子 1 0.976 0.976 0.976 0.786
主观评价方法Ⅰ AHP 00.976 1 0.952 1 0.69
灰色 0.976 0.952 1 0.952 0.833
TOPSIS 0.976 1 0.952 1 0.69
主观评价法Ⅱ 模糊 0.786 0.69 0.833 0.69 1
1). 客观评价法与主观评价法Ⅰ的比较:通过表8的Spearman相关系数可知,因子分析法的排序结果与三种主观评价方法Ⅰ的结果具有相同的相关度,相关系数均为0.976。
因子分析法在构造综合评价值时所涉及到的权重都是从数学变换中伴随生成的,同时因子分析的具体过程在数学上都有严格的逻辑,可以说因子分析法从处理数据开始直至输出综合因子得分的整个过程都具有很强的客观性;而主观评价法Ⅰ与因子分析法相比,其中的AHP法对原始指标加权综合前、灰色关联度法对关联度系数加权综合前、TOPSIS法对欧氏距离加权综合前的过程都是数学运算过程,不同的是在加权权数的确定上主观评价方法Ⅰ是主观确定的;因此从评价结果的输出过程来看,因子分析法与主观评价法Ⅰ的差异取决于加权权数。
2).客观评价法与主观评价法Ⅱ的比较:因子分析法的排序结果与模糊综合评价法的结果相关度较低,相关系数为0.786。
模糊综合评价法从评价集的定义、特别是隶属度函数的构建、合成算子的选取直到权重的选取、输出评价结果全过程均包含主观判断的因素,随意性较大,其评价结果很大程度上取决于参与评价的专家的素质。因此模糊评价与因子分析法评价结果的差异可能产生于评价过程的任一环节,两者的评价结果很容易产生较大差异。
3). 主观评价方法Ⅰ与主观评价法Ⅱ比较:两者评价结果的相关度也不高,如上文所述,主观评价方法Ⅰ在加权综合前的过程是数学运算过程,而模糊评价在加权综合前的过程是主观判断,如果两者用于加权综合的权数是通过同样的方法取得的(上文的实例均是采用AHP法得到的权数),则评价结果的差异取决于加权综合前的任何一环节。
4). 三种主观评价方法Ⅰ间的比较:AHP与TOPSIS法的排序结果完全相同,两者与灰色关联度法高度相关,相关系数为0.976。
这三种方法都是通过对原始指标值的数学运算,再利用主观确定的权数对数学运算的结果进行加权综合后输出评价结果的,在采用的加权权数相同的情况下,应该输出相同的结果,上文AHP与TOPSIS法的排序完全相同也证实了这一点;但灰色关联度法在加权综合前的数学运算过程中,计算灰色关联度系数时“分辨率ξ”的确定无一个合理的标准(本例取ξ=0.5),这与AHP和TOPSIS法有点区别,也正是这点差别,使灰色关联度法与AHP和TOPSIS法的评价结果产生差异。
上述分析与实证的结果基本一致,但并不能说明评价过程中客观的数学运算和主观判断的优劣,实际上数学运算有时可能扭曲真实情况,主观判断有时能结合评价对象的特点形成更真实的反映。
不过有的学者认为综合各种评价方法的结果可以找到一个最优排序,并提出序号总和理论、众数理论和加权平均理论等,所谓“序号和理论”是指把各种不同的评价方法下的排序序号相加,得到序号总和,按序号总和从小到大的排序即为最优的位序,当序号总和相等而无法排序时,可按众数理论确定其位序,本例按序号总和排序的结果见表7。这里运用spearman相关分析对各种排序与序号总和排序的相关性作了简要分析,结果如表9所示:
表9
排序方法 客观评价法 主观评价方法Ⅰ 主观评价方法Ⅱ
因子分析法 AHP 灰色关联度 TOPSIS 模糊评价
Spearman相关系数 1 0.976 0.976 0.976 0.786
由表9可知,客观赋权法即因子分析法与序号总和法的结果完全相同,三种主观评价方法Ⅰ与序号总和法的相关度相同,且高度相关(相关系数均是0.976),模糊评价法与序号总和法相关度最低,相关系数为0.786。
四、结束语
鉴于上述各种评价方法间在评价过程上存在的差异,在选择评价方法时要结合评价对象的特点,充分考虑这些差异可能给评价结果造成的影响。比如当某项决策需突出评价对象某方面的特征时,运用主观性更强的评价方法可能会得到较好的结果;而评价对象的特性不易把握、或评价人员的知识不足以准确把握评价对象的特性时,运用客观性更强的评价方法更恰当。
参考文献:
1) 周国强.经济系统综合经济效益评价方法比较.武汉理工大学学报(交通科学与工程版)2002(4)
2) 白雪梅,赵松山.多种综合评价方法的优劣判断研究.统计研究2000(7)
3) 杭州商学院自然科学基金课题组.序号总和理论及其在综合经济效益排序中的应用.数量经济技术经济研究1996(1)
- 上一篇:企业人力资源投资经济效果评价
- 下一篇:对人力资源资本化的再认识