理论教育 后评价方法的优化方案

后评价方法的优化方案

时间:2023-06-12 理论教育 版权反馈
【摘要】:后评价通常采用的方法有对比分析法、逻辑框架法、成功度评价法和综合评价法等。1.对比分析法对比分析法包括项目实施前后对比、有无项目的对比两种比较方法。由于“无项目”时可能发生的情况往往无法确切描述,在项目后评价中只能用一些方法去近似度量项目投资的效果和效益。表11-2逻辑框架法的基本模式逻辑框架法的逻辑关系。

后评价方法的优化方案

后评价通常采用的方法有对比分析法、逻辑框架法、成功度评价法和综合评价法等。

1.对比分析法

对比分析法包括项目实施前后对比、有无项目的对比两种比较方法。

(1)前后对比法是指将项目实施之前与项目实施之后的情况加以对比,以确定项目效益的一种方法。对比的目的是要找出项目建设前后产生的变化和差距,为提出问题和分析原因找到重点,用以评估项目计划、决策和实施的质量。

实践中,前后对比法在项目后评价中的具体实施是将项目前期的可行性研究和评估的预测结论,以及初步设计技术经济指标,与项目的实际运行结果及在后评价时做出的新预测相比较,以发现差异,分析原因,并揭示项目计划、决策和实施存在的问题。这种对比方法简单、易于操作,是一种最基础和最常用的科学方法,是进行后评价的基础。

(2)有无对比法是指将项目实际发生的情况与若无这个项目可能发生的情况进行对比,以度量项目的真实效益、影响和作用。对比的重点是要分清项目作用的影响与项目以外作用的影响。

有无对比法应用于项目后评价时,应正确的定义和度量归功于项目投资的效益或效果,剔除那些非项目因素而带来的效益或效果。由于“无项目”时可能发生的情况往往无法确切描述,在项目后评价中只能用一些方法去近似度量项目投资的效果和效益。比较理想的做法是在该受益地区之外,找一个在经济发展水平、投资环境等方面类似于项目区的地区作为“对照区”,并对其进行相应调整,尽量保证与项目区的情况接近,然后将项目区的效益与“对照区”的效益进行对比和评价,以此反映项目投资引起的效益或效果增量。

有无对比法往往能更好地找到项目本身在项目区经济、社会和生态方面所发挥的作用,评价结果往往更加准确。

2.逻辑框架法

(1)逻辑框架法的概念。

逻辑框架法是一种概念化分析和论述项目的方法,即用一张简单的框图来清晰地分析一个复杂项目的内涵和关系,使之更易理解。逻辑框架法是将几个内容相关且必须同步考虑的动态因素组合起来,通过分析其相互之间的关系,从设计、策划、目标等方面来评价一项活动或工作。逻辑框架法为项目计划者和评价者提供了一种分析框架,用以确定工作的范围和任务,并对项目目标和达到目标所需要的手段进行逻辑关系的分析。

逻辑框架法(LFA),是美国国际开发署(USAID)在1970 年开发并使用的一种设计、计划和评价的方法,目前大部分国际组织把该方法应用于援助项目的计划、管理和后评价中。

(2)逻辑框架法的基本模式。

逻辑框架法的核心是项目事物层次间的因果逻辑关系,是用来揭示项目结果与内外在因素之间的关系,即如果提供了某种条件,那么就会产生某种结果;这些条件包括事物内在的因素和事物所需要的外部条件。逻辑框架法把目标及因果关系分为四个层次,即目标、目的、产出、投入。

① 目标。目标通常是指高层次的目标,即宏观计划、规划、政策和方针等所指向的目标。宏观目标一般超越了项目的范畴,是指国家、地区、部门或投资组织的整体目标。这个层次目标的确定和指标的选择一般由国家或行业部门选定,一般要与国家发展目标相联系,并符合国家产业政策、行业规划等的要求。

②目的。目的是指为什么要实施这个项目,即项目的直接效果和作用,是项目立项的重要依据,一般应考虑项目为受益群体带来的效果,主要从经济效益和社会效益来考虑。这个层次的目标由项目实施机构和独立的评价机构来确定,目标的实现由项目本身的因素来确定。

③产出。产出是指项目建成后提供的可直接计量的产品或服务,即项目的建设内容或投入的产出物,一般包括项目所完成的实际工程或改善机构制度、政策法规等。在分析中应注意,在产出中,项目可能会提供的一些服务和就业机会往往不是产出而是项目的目的或目标。

④ 投入。投入是指项目实施过程中的资源投入量和时间投入,如项目建设的起止时间及工期。

逻辑框架法的基本模式如表11-2 所示,表中是一个4×4 的矩阵,矩阵自下而上的四行分别代表项目的投入、产出、目的和目标的四个层次;自左而右4 列则分别为各层次目标文字叙述、定量化指标、指标的验证方法和实现该目标的必要外部条件。

表11-2 逻辑框架法的基本模式

(3)逻辑框架法的逻辑关系。

逻辑框架法的逻辑关系分为垂直逻辑和水平逻辑。

① 垂直逻辑关系,即因果关系,从下往上进行四个层次的分析,第一层次是如果保证一定的资源投入,并加以很好的管理,则预计有怎样的产出;第二层次是如果项目的产出活动能够顺利进行,并确保外部条件能够落实,则预计能取得怎样的具体目标;第三层次是项目的具体目标对整个地区乃至整个国家更高层次宏观目标的贡献关联性。值得注意的是,在四个目标层次之间,有一些重要的假设条件,即必要的外部条件或风险,分析目标层和重要的假设条件之间的关系非常关键。这些假定条件主要是指可能对项目的进展或成果产生影响,而项目管理者又无法控制的外部条件。这种失控的发生有多方面的原因,首先是项目所在地的特定自然环境条件的变化是不可控的,如对于自然灾害的发生,可能会导致建设项目损毁,可能会导致农业项目颗粒无收等;其次是政府在政策、计划、发展战略等方面的失误或变化给项目带来的影响,也属于外部不可控因素。第三个不可控因素是管理部门体制所造成的问题,使项目的投入产出与其目的和目标相分离。项目的假设条件很多,一般选定其中几个最主要的因素作为假定的前提条件。

② 水平逻辑关系主要是指验证指标和验证方法及实现目标的主要条件。水平逻辑的目的是要通过确立客观的验证指标及其指标的验证方法来衡量项目的资源和结果。与垂直逻辑中的每个层次目标对应,水平逻辑对各层次的结果加以具体说明。其中,验证指标是用来说明层次目标的结果,是为了证明层次目标的实现程度。因此,验证指标需要具备可量化性和准确性,指标内容充分完整、客观具体,指标和目标之间的关系明确合理并且能够突出主要目标;验证方法就是主要资料来源和验证所采用的方法,一般主要资料来源是通过收集数据和咨询信息获得。(www.daowen.com)

(4)逻辑框架矩阵的编制和应用。

编制逻辑框架矩阵,一般先确定垂直逻辑关系,即先从上到下填写项目描述,然后从下到上填写假设;之后,再确定水平逻辑关系,即沿横向填写指标和资料来源。逻辑框架矩阵的编制不是一次性的工作,需要适时更新和调整,如矩阵中某个格子里的内容发生变化,或有新的内容填充,则需要对其他所有格子的内容重新进行修改。

采用逻辑框架法进行工程项目后评价时,一般围绕三个方面确立项目目标层次间的逻辑关系,用以分析项目的效率、效果、影响和持续性:一是项目的原定目标和目的已经达到的程度;二是项目原定的成本效益指标的实现程度,主要反映项目投入与产出的关系;三是项目未来可持续发展的程度,下一步会有什么风险,有多大风险,主要通过项目产出、效果、影响的关联性,找出影响项目持续发展的主要因素,并区别内在因素和外部条件提出相应的措施和建议。采用逻辑框架法进行工程项目后评价时,可以根据项目特征设计评价的内容和指标,以适应不同工程项目后评价的要求。

3.成功度评价法

成功度评价法也称打分法,是以逻辑框架法分析的项目目标的实现程度和经济效益分析的评价结论为基础,以项目的目标和效益为核心所进行的全面系统的评价。成功度评价法主要是依靠评价专家或专家组的经验,根据项目各方面的实际执行情况,对照项目立项阶段以及规划设计阶段所确定的目标和计划,研究分析项目实际达到的结果和差距,以评价项目的实现程度,即项目总体的成功程度。

具体应用成功度评价法时,首先要确定成功度的等级及标准,再选择与项目相关的评价指标并确定其对应的重要性权重,通过指标重要性分析和单项成功度结论的综合,即可得到整个项目的成功度指标。

(1)成功度的等级标准。

工程项目的成功度可划分为五个等级,分别用A,B,C,D,E 表示。

A:表示完全成功。项目预期的各项目标已经全部实现或超出,获得了超过预期的经济效益和社会效益;相对成本而言,总体效益非常大。

B:表示成功。项目的绝大部分目标已经全部实现,获得了等于或接近预期的经济效益和社会效益;相对成本而言,总体效益较大。

C:表示部分成功。项目实现了部分预期的目标,获得了一定的经济效益和社会效益;相对成本而言,取得了一定效益。

D:表示不成功。项目实现的目标很少;相对成本而言,取得的效益很少或不重要。

E:表示失败。未实现项目目标;相对成本而言,没有取得效益或亏损,项目放弃。

(2)编制项目成功度评价分析表。

评价人员首先根据具体项目的类型和特点,确定评定成功度的指标,并分析表中指标与项目相关的程度,按重要性可分为重要、次重要和不重要3 类。由于项目后评价任务和目的不同,评定成功度指标的选取也不尽相同。如表11-3 中,为英国海外开发署1995 年制定的评定成功度的指标体系;表11-4 为我国国内比较典型的项目成功度评价分析表。

(3)项目成功度评定。

项目成功度评定通常是聘请若干部门的专家,将项目成功度评价表中所列每个评价指标的相关重要性做出定性评价,即每个评价指标为重要、次重要还是不重要;并对项目的各项评价指标按照成功度评价等级A、B、C、D、E 五级进行打分,对每项指标的成功度进行评价后,综合单项指标的成功度结论和指标重要性可得到整个项目的成功度评价结论,通常在表11-3 或表11-4 中进行。在评定具体项目的成功度时,并不一定要测定所有的指标,相关重要性不重要的指标就无须测定。

表11-3 项目成功度评价表

表11-4 我国的项目成功度评价分析表

4.综合评价法

一个工程项目的优劣通常是综合性的表现,如项目实施后的技术效果(表现为技术的先进性、使用性、可靠性、安全性等方面)、经济效果(投资少、效益高)、社会效果(改善环境、减轻污染等)等。项目综合评价法就是评价项目整体效果的方法。

运用综合评价法,首先要确定评价目标和评价范围;然后确定评价指标体系和指标标准,并利用专家判断法确定各指标权重;最后选择加权平均综合评价方法,进行综合评价。综合评价法可用于建设项目各方案之间对比优选分析,也可用于方案的各个部分、各阶段、各层次评价,寻求方案的最优化。进行项目综合评价,一般在技术、财务、经济、社会、环境等局部评价的基础上,根据项目投资的总体目标,对方案的综合价值做出评价。

在实际操作中,可以使用综合评价法对项目实施后评价,可分解为项目建设过程评价、项目经济效益评价、项目社会经济的影响评价、可持续性评价等评价一级目标,根据其不同的特点选用不同的评价指标体系;同时还需要根据工程特点有侧重地分解二级或三级评价目标,从而进行定性或定量分析,综合评价项目实施效果。

免责声明:以上内容源自网络,版权归原作者所有,如有侵犯您的原创版权请告知,我们将尽快删除相关内容。

我要反馈