绩效管理和评价基本技术方法之三:项目等级评价法
【编者按】作为应用科学,绩效管理和评价实务兴起于西方,在实践发展过程中形成了一些经典的技术方法,并得到广泛的推广应用。受历史条件所限,尽管其适用对象、应用环境、目标作用存在一定的局限性,但这些经典的技术方法是这门应用科学的基础,我们称之为基本技术方法。目前,我国绩效管理和评价工作中使用的技术方法基本都是对这些基本技术方法的直接使用、综合、或者改进。中景瑞晟绩效管理与评估服务中心组织人员对这些基本技术方法进行总结、整理,旨在为相关理论研究和实务工作者提供参考,方便大家系统学习。现介绍第三个:项目等级评价法(Program Assessment Rating Tool,PART)。
绩效管理和评价基本技术方法之三:项目等级评价法
一、项目等级评价法概述
项目等级评价法是通过取样、计算和分析对相关数据标准化计量,根据项目要求的“质量”、“数量”、“时间”判定项目实施的效果程度,从而进行等级划分的方法。作为一门科学的应用广泛的项目评估方法,在应用这种评价方法时,评价者应首先确定等级评价的标准,然后对被评价项目列出几种行为程度,供评价者选择。
二、项目评级的意义
1.市场经济活动中的“身份证”。客观的说,优良的项目等级可以提升项目单位的形象,降低宣传成本提高竞争力。
2.进入资本市场的“通行证”,降低融资成本。现代资本市场愈加发达但信息不对称依然是较为普遍的现象,优良的项目评级认证将会加大市场对其的认可更加容易获得金融机构的支持。
3.有助于企业改善经营管理。通过评级,让项目单位实实在在的明白项目实施过程中存在的问题及风险,从而促进项目单位改善经营、提升项目管理能力。
4.可以为管理部门提供重要的参考依据,加强有效监管。项目评级涵盖了项目实施时期的大量信息,是判断执行力以及所在行业发展状况的重要情报,可以为有效监管规避行业风险提供重要的参考依据。
三、项目评级的方法
项目评级的方法是指对受评客体项目实施状况进行分析并判断优劣的技巧,贯穿于分析、综合和评价的全过程。按照不同的标志,项目评级方法有不同的分类,如要素分析法、综合分析法、功效系数法。
4F要素分析法:着重分析以下四方面要素:组织要素(Organization Factor)、经济要素(Economic Factor)、财务要素(Financial Factor)、管理要素(Management Factor)。根据项目的形成要素进行定性分析并配合定量计算。在此过程中必须要将影响项目实施的各个方面因素都包括进去,不能遗漏,否则等级分析的结果将不能达到全面反映项目的要求。
功效系数法:根据多目标规划原理,对每一个项目评估指标分别确定满意值和不允许值。然后以不允许值为下限,计算其指标实现满意值的程度,并转化为相应的评估分数,最后加权计算出项目评估综合指数。
综合分析法:依据受评客体的实际统计数据计算综合评价得分的数学模型。
四、项目评级体系
在项目分析阶段,我们应对项目中的某些具体问题和具体解决问题的活动作出详尽的说明:规定项目评级过程中的边界和约束,划分系统和环境,说明解决问题的对策和资源,并解释项目内容和项目评级两部分活动之间的相互匹配关系。
具体来说,可以将项目评级分析阶段的工作内容概括为如下5个部分:
图1:项目等级评价简易流程
1.分析项目的性质和环境
这里包括两部分内容:分析项目性质和分析项目条件。分析问题性质主要是要弄清楚项目实施过程中的活动所形成的项目集和它们的来龙去脉,即项目的结构、过程和态势。为此项目的评级人员必须广泛地和决策者、利益相关者进行对话和沟通。
2.在节点处进行小结
应该将整个项目评价过程分为几个关键阶段,及时对前一阶段的工作进行总结,并对后续工作计划进行适时、适当地调整。这项工作的主要内容包括:时间阶段工作的重要性;可能采取行动的组织和个人;利益相关的组织或个人;目标、评价指标和约束条件的初步描述等。同时要注意在每一个阶段侧重于不同的评价方向,以提升评价的效率。
3.制定管理目标
在项目评级管理过程中要实施有效的管理方式,关键在于尽早明确该项目的管理目标。但由于所评价项目的各具特性,我们很难通过从项目发起者那里获得准确的描述来判断项目管理应达到的目标。此外,管理体制上的隔阂、管理者的个人偏好、项目发起者的知识水平,都可能引起项目管理过程中目标制定上的偏差。
4.确定效果评价指标
为确保评价项目评级的效果,评级人员需要设定一组指标。合理的评价指标能准确反映项目实施的效果,但并不是说任何的指标都是合理的。在评价过程中需要根据项目实际情况,排出所有指标的优先次序。当存在难以直接量化的目标时,可以采用其他易定量化的代用指标。
5.识别评价过程中的约束
约束是对项目评估在时间过程中的约束。只有不直接或间接违反约束的管理方法,在时间中才是可行的。它可能是资源的限制、组织体制的束缚、法规政策的界限等等。
五、项目评级的基本程序
项目评级是一项十分严肃的工作,评估的结果将决定对该项目的认可程度,是对一个项目单位的鉴定书。因此,必须有严格的评估程序加以保证。评级结果与评级过程密切相关,没有严谨的程序、步骤,就不可能得出客观公正的评级结果。计量只是一个解决问题的工具,因此在面对不同项目时我们需要通过实际情况定立不同的模型进行模拟拟合。
例如,以F检验为例进行判断项目总体实施过程中的执行情况是否存在显著性差异。
1.基本概念
*因素或因子:所要检验的对象,要分析项目的构成因子对项目的实施是否有影响。
*水平或处理:因子的不同表现。
*观测值:在每个因素水平下得到的样本数据。
2.原理和方法
小概率原理是方差分析的指导思想。若不同水平对结果无影响,则项目因子方差中仅有随机因素的差异,而无系统差异,它与项目内因子方差近似比值应接近1;反之,两个方差的比值就会显著地大于1。当这个比值大到某个程度或者说达到某个临界点,就可以判断出不同水平之间存在着显著性差异。
构造检验统计量,其中n为项目部门数,k为项目因子数。
其中F值越大,说明总的项目差异波动中,项目间因子方差是主要部分;F值越小,说明项目因子中的随机波动是差异的主要来源。
六、项目等级的划分
依据项目等级评价体系,将项目等级划分为以下8个层次
等级类别 | 等级说明 |
AAA级 | 最优项目,项目单位执行力强项目效果好 |
AA级 | 优质项目,项目单位执行力一般项目效果好 |
A级 | 普通项目,项目单位执行一般项目效果好,项目风险低 |
BBB级 | 项目单位内部存在不确定因素的不良变化,项目基本完成能够产生一定效果 |
BB级 | 项目单位存在不良因素的投机项目 |
B级 | 弱势投机项目 |
C级 | 强势投机项目 |
D级 | 违约项目 |
七、注意事项
具体而言,项目等级评价还需要注意以下三个方面:
第一,各项选择含义的明确程度;
第二,上层管理人员在分析评价结果时,分辨理想答案的清晰程度;
第三,对评价者来说各个评价项目含义的清晰程度。清晰明确的需求和目标会使评级人员更好地把握项目中的细节之处,提升评价的执行力和精确度。
中景瑞晟绩效管理与评估服务中心
学术研究部
邓子程(总结整理