好文收藏 | 公益项目为什么要做评估,怎么做评估?
扫描二维码
订阅明德公益研究中心邮件服务
公益评估最新干货、观点、福利、资源通通都有
▽
分享嘉宾:王彩霞
明德公益研究中心副主任,管理学硕士,2014-2017年中央财政支持社会组织参与社会服务项目主要负责人,北京市残联购买助残服务项目评估专家。负责或参与多个基金会、政府委托的评估项目。
今天想和大家分享一下公益评估的重要性,也聊聊明德公益研究中心在评估方面的一些经验,包括我们在评估中发现的一些问题,提醒大家避免踩坑。最后,也会跟大家介绍一下我们明德现在在行业推动方面做的一个平台。
那么在一开始,想先和大家介绍一下明德。
01
明德是谁?做什么的?
明德是2012年由清华大学公共管理学院NGO研究所发起成立,在民政部登记注册的一个全国性民非。
2012年,我们就开始承接中央财政支持社会组织参与社会服务项目的评估工作,后续几年也一直有在做一些全国性基金会委托的评估项目,因此在评估方面积累了一些经验。
从2015年开始,我们就在思考明德未来的发展定位和方向,也重新探讨了我们的愿景、使命和价值观。
后来我们决定将公益项目评估作为我们的主要方向,而且我们也希望不仅是单纯的做公益项目评估,也能推动整个行业的发展。
所以我们最后定位的一个愿景是“激情、阳光、专业的公益生态”。使命是“让每一位公益从业者拥有评估思维,使每一个公益组织成为学习型组织”。
02
为什么要做评估?它有什么价值?
在介绍评估价值之前,很重要的是明确「评估」到底是什么。
① 你真的了解什么是评估吗?
我们所说的评估,是指借助一定的科学方法,通常是定量与定性评估方法相结合,通过科学的调研和分析,对在一定时间维度和拥有社会资源、具有明确目标的、有组织的项目设计、执行和结果的评价。
从下图可以看出一个项目的流程:
而评估是贯穿整个流程的,也分前、中、后期。
前期评估,往往是我们项目执行方在项目开始前做的一个需求的评估,基本上不会委托到第三方评估机构。
中期评估,比如一个持续五年的项目,那我们可能在第二年或者第三年的时候进行评估,看看这个项目以往运行过程中存在哪些问题、会有哪些经验可以去传承或者解决问题。
末期评估,其实大家很容易理解就是我们项目结束之后开展的评估,我们往往也叫事后评估。目前公益领域比较多的基本上都是在项目结束后开展评估。
大家对评估有了基础了解后,我们就可以一起讨论评估究竟有什么价值。
② 评估的价值是什么?
第一,评估对公益机构来说提供了合法性或合规性的证明。合规性的意思,比如说政府购买服务项目,政府会评估这个项目的资金使用了之后合不合规等等。而合法性,是通过评估,看看一个项目是否符合法律或政策的规定,避免被撤销。
第二,通过评估验证项目设计的合理可行性。这对项目设计来说往往是最关键的一个部分,如果说项目设计有很大的问题,整个项目实施可能就会南辕北辙。所以此时我们会通过系统的评估,发现项目是否合理可行。
第三,评估能助力项目产出的有效性和效果的持续性。一个项目可能有很多产出,但是不是所有的产出都是有效的呢?不一定。如果说这个产出跟这个项目的目标是不对应的,其实它在这个项目里来说是无效的。
第四,评估也是项目执行方对相关利益群体负责的一个手段。无论是资助方、受益方还是公众,都需要通过评估了解一个项目的资金使用情况、项目产出情况、项目效果呈现。
第五,评估能促进项目改进与完善。通过第三方客观公正的评估,来帮助项目团队来去发现项目中有哪些问题并改进和完善,从而帮助项目发挥更大的价值。
第六,通过评估发挥倡导功能、推动行业发展的作用。和大家分享明德的3个案例。
2012年,明德受财政部委托,为中央财政支持社会组织参与社会服务项目进行评估。在评估中,我们发现这个项目的工作人员薪资也好管理费也好,居然完全没有。所以我们在评估中把这个意见也反馈上去,这个对很多公益组织来说影响很大,因为这个项目带动了很多地方购买服务,而据我们了解,后续大家在服务经费方面都进行了增加。
还有一个案例是中国人口福利基金会健康暖心工程项目。这是个很典型的通过资金去救助贫困人群的项目,但我们在评估中发现在资金的可及性上还存在一些问题。所以我们提了一个更加可持续发展的建议,从第二年开始他们整个项目的运作模式完全变了。
最后是北京市残联购买服务项目,明德在2014年和2016年分别给他们做了评估,每年我们都会反馈一些我们第三方的意见,不仅是从评估过程中发现的一些问题,同时也是从整个行业的角度来去提供一些建议,推动了他们政府购买服务相关规定或者包括财务管理方面的一些政策的完善。
03
评估怎么做?
现在大家对公益评估的价值应该有更深的认识,那么接踵而来的问题就是:评估到底怎么做?
我以明德为例。
① 明德做评估有我们自己的理念:
点击查看大图
我们期望通过一个高质量的评估服务,推动项目利益相关方在日常工作中应用评估,从而推动整个项目、组织和政策的改进,最终实现人们生活能够得以改善的目的。
② 基于这个理念,我们在评估过程中的关注点就不单单是项目管理这一块,而是多维度的:
点击查看大图
可以看到,我们不仅关注实施方的组织管理、项目管理,同时也非常关注资助方的项目管理和组织管理。
我们希望自己不仅仅是微观上一个项目的改进推动,同时也是希望推动整个组织上的一个完善,更宏观的说,希望能够推动整个环境的优化和一个系统的变革。
那有人可能会问:「你们明德做评估有什么不一样吗?」
③ 明德的评估有三大特色:
首先我们的研究基础非常广泛扎实。不仅有依托清华大学NGO研究所的研究基础,也有在评估领域有评估之父之称的邓国胜老师的评估理论与框架。
其次我们很注重评估框架与指标个性化。针对每个项目制定独特的评估框架与指标体系,使每个项目的评估都具有针对性及实用性。
最后我们很推崇共享价值。我们提倡发展性与学习性评估,将学习与发展的理念融于评估,而且注重深入挖掘表面现象的内在生因,对标国内外相关实践,紧密结合未来发展趋势,提出建设性意见与建议。这个特色也得到特别高的认可。
④ 明德的评估过程:
点击查看大图
在设计阶段,我们非常注重跟委托方的一个充分沟通,很多委托方对评估其实并不熟悉,比如说有的委托方过于把评估的价值扩大化,然后希望通过评估能够解决他们遇到的所有问题,那这个其实是不可能的,所以要充分沟通。
前期费时最长的一个阶段就是完善方案,不仅要结合项目本身的特色,还要结合我们的科学性、合理性、可行性等。
04
我们发现项目最常存在这些问题
这几年,我们在做评估过程中发现项目本身可能存在的一些问题,在这里和大家分享,希望能够帮助大家意识到这些问题的存在。
① 项目设计存在的问题:
★ 很多项目与组织自身使命或目标完全无关;
★ 项目只是组织自己想做的,并不是服务对象的真实需求;
★ 目标太大,通过项目尤其是一年的项目根本无法实现;
★ 项目中的具体活动内容与目标无逻辑关系,无法贡献与项目目标的实现;
★ 项目就只是为了完成一些动作或任务,无可持续发展理念。
② 项目管理存在的问题:
★ 项目管理制度不完善;
★ 团队分工不合理,沟通不顺畅;
★ 未充分调动社会资源;
★ 项目无风险与预防机制;
★ 项目痕迹资料无留存,档案管理不规范;欠缺反思与总结能力。
③ 项目总结存在的问题:
混淆项目产出与项目效果。
这个是很多项目执行方或者资助方特别关注的一个方面。也是大家自己在做项目总结时最容易混淆的概念。
两者的区别可以看下图:
点击查看大图
05
一个为所有公益人设计的支持平台
过去几年,我们在做评估的过程中发现,评估需求越来越大,包括政府、基金会、社会组织,越来越重视评估。
但与此同时,评估机构依然很少,而且专业度、权威性都还有待提升。
怎么办?
经过这几年经验的积累,现在明德开始着手做一些行业推动性的工作,我们正在筹备发起成立一个公益项目评估支持与社群学习平台。
① 这个平台有什么?
在这个平台上,我们会提供评估应用的实践指导,引进国际的前沿经验、梳理总结国内的经验,供所有公益人传播交流。同时我们也是希望能够通过我们所有人的努力,推动评估相关政策的出台。
② 这个平台最适合哪些人?
首先是第三方评估机构。
其次是资助型基金会。他们评估能力的提升,能让资助的机构或者项目受益。
还有执行类社会组织。不是说每个社会组织都一定要应用第三方评估,而是希望每个社会组织都能够掌握一些评估的思维,可以做自评估。
最后是民政部地方民政系统。我们希望推动这部分群体的购买服务项目更好地开展工作。
这个平台现在已经在筹备过程中,今年年底我们会就这个平台做一些公布,如果你是公益人,如果你也认同公益评估正在成为一个趋势,希望你密切关注明德。
问答环节
问:赋权评估的指标通常可以怎么来设计呢?从哪几个维度去思考和设计?
答:这个问题很好。我的理解是,其实评估的指标设计,与赋权评估或者别的评估的关联度可能不是特别大。而是说,我们开展评估的方式上跟评估的类型比较相关,比如说我们的参与式评估和赋权评估、或者是我们原先说的总结性评估。在评估指标的设置上主要是结合评估目的和项目本身的特点来设计指标。但是在开展评估的过程中,我们怎么去评估以及“项目各个利益相关方应该怎么参与”这个其实是不同的,所以,我理解的是赋权评估和参与式评估等等的这几个评估类型主要的不同不在于指标的设计,而是在于评估方式的开展。
问:我是深圳的一名社工,我们有个项目就这几天评估。评估方给出的标准中有一个内容,要使用投入产出比评估,这个方法要怎么操作呢?
答:一般我们说投入产出比就是对效率做评估,那这个就是要求有一个对比的,因为去衡量投入产出比的时候一般是要把投入转化为产出,比如说投入多少钱、有多少人、物资等等,然后就是产出了哪些东西,那这个时候我们是没办法只对这一个项目去得出一个结果。因为在目前,彼此之间是没办法转化,如果说所有的投入都转化为资金的话,那其实也不是叫效率了。这个时候,其实我们做投入产出比要强调一个对比性,就是跟其他同类项目然后做一个投入产出的一个比例的对比。
更多公益评估最新的干货、观点、福利、资源
订阅邮件获取
▼▼▼