你的公益项目,真的将“公益”二字落到实处了吗?
根据世界卫生组织的数据,疟疾在2008年夺走一百万条人命,大部分还都是非洲的小孩。研究显示在疟疾感染高发区,睡在经杀虫剂浸泡过的蚊帐(1顶10元)里,大约能够减少50%的疟疾感染。
联合国顾问以及纽约哥伦比亚大学地球研究所的主任Jeffrey Sachs提出“免费提供或者打折出售蚊帐”的推进方式,斯坦福大学随后也开展了一项随机干预实验:通过小额信贷或者免费发放让更多家庭都能拥有该蚊帐,但结果却出人意料:蚊帐对疟疾没有影响!?
Jeffrey曾鼓励村民100%参与,但实际上,斯坦福大学进行干预实验时,只涵盖了20%的村民。
这个实验到底有没有效果,想要长期实施该如何落地?深究原因,其实和影响评估存在着很大的关系。遗憾的是,中国的公益领域、学术领域,对项目效果进行评估的项目非常少。
一、为什么这么多项目不做影响评估?
有些人(组织)可能认为影响评估太过烧钱,所以会存在伦理方面的顾虑;在具体实施过程中,影响评估对各种外在条件还有着极其严苛的要求;甚至不少基金会觉得对于已经了解到的结果,根本没有进行影响评估的必要。
但其实,影响评估对于了解公益项目的进展、改进公益项目的方案能起到至关重要的作用,更是公益科学性的核心体现。
小王子所在的三一基金会一直在倡导「科学公益」,因为我们知道一个公益项目若想可持续发展靠的绝不仅仅是情怀和热血,还需要借助科学有效的方法与工具。
上周五,在清新有爱的3ESPACE,举办了第一届E掘行动校友会,其中,陕西师范大学教育实验经济研究所(CEEE)的三一学者们(戳这里了解三一学者)为E掘伙伴们带来了一场影响评估课程的精彩工作坊。没能参加这场工作坊的小伙伴也别灰心,小王子这就把精彩内容分享给你。
<< 滑动查看下一张图片 >>
关于影响评估,具体的实施过程如下:
首先,明确列出项目目标和(可测量的)预期结果。
三一学者分享了一个最常用的分析框架——影响评估模型(POAR framework),主要包含:问题P、目标0(总目标和具体目标)、实施方法A(对象、内容)和结果R这几个核心内容。
比如,就改善婴幼儿营养健康这个总目标,我们可罗列出具体的3个小目标和相对应的度量指标。
目标1:通过补充多元维生素改善婴幼儿影响不良
度量指标1:儿童贫血率
目标2:通过补充多元维生素降低婴幼儿贫血率
度量指标2:体重指数
目标3:通过补充多元维生素降低婴幼儿贫血率
度量指标3:血红蛋白含量
其次,制定出目标的因果关系链。
以下表格是分析因果链的常用工具之一:
投入
过程或活动
产出
结果
内容
衡量指标
假定条件
为了让E掘伙伴们更好地理解如何使用这个思维工具,CEEE的三一学者们举了一个助学项目的例子。
(1)根据影响评估模型进行事前设计和实验设计,具体内容如下:
事前设计
问题:国家要普及高中阶段教育,贫困农村地区高中阶段的毛入学率不到50%
目标:探索ECFA(平均1500元/人年X3年)对农村贫困初中生高中阶段教育决策的影响
预期结果:高中阶段的入学率提高
影响评估方法:随机干预实验(RCT)
实验设计(如下图所示):
(2)根据以上两个设计方案列出因果链分析里对应的因素(如下表格所示):
投入
过程或活动
产出
结果
内容
助学金
给学生发助学金
收到资助的学生
学生辍学率降低
衡量指标
支出金额
接受助学金的学生人数
受资助的学生将助学金用于学习的支出
辍学率
假定条件
学生没有辍学
学生都收到了助学金
学生出勤率在85%以上
家庭把助学金都用在了学生的学习上
学生辍学的主要原因是经济原因
再者,针对不同的评估目标选择最合适的影响评估方法。
常用的影响评估方法主要有随机干预实验、匹配法、倍差分析法和断点回归方法这4种。关于影响评估与科学有效的方法小王子后续还会和大家继续分享,敬请期待!
最后,根据目标进行数据收集和研究分析。
数据收集前需要考虑这些问题:收集数据的对象,什么数据,收集数据的途径,数据收集需要考虑的问题以及收集数据的最佳时期。
研究分析需要用到时定性分析和定量分析相结合的研究方法,其中,定性分析对于设置因果链的指标或因素有着十分重要的作用。
二、公益项目为什么要做影响评估?
这是因为,做影响评估对公益项目有诸多意义,比如:
让有限的资源都能得到最有价值的使用;
为下一步决策提供事实、数据作为参考;
从中发现问题,继续完善和优化现有项目,从而推荐复制到更多的新项目上;
让捐赠人、公众和政府确信公益项目真的改变了受众的生命与生活。
影响评估是一个长期的过程,需要公益组织进行定期回顾梳理,一方面根据公益项目进展的改变来不断调整评估方法和测量指标,另一方面当公益项目开展偏离计划时,需要及时进行纠正。
上周六上午,在E掘行动校友会工作坊之后,CEEE的老师带领E掘伙伴们体验了影响评估的设计,介绍了影响评估中数据收集的方法,并结合E掘伙伴们的公益项目,为他们设计了针对性的影响评估的方案。
△ 由CEEE的三一学者们带来的影响评估工作坊是E掘行动校友会的环节之一,戳这里了解E掘行动校友会详情
E掘伙伴们在初次尝试了影响评估的工具和使用方法之后,纷纷表示:影响评估能让公益项目的行动设计变得更加明确和有目的性,并期待将这种科学方法应用和推广在以后的工作中。
CEEE的三一学者们为E掘伙伴们带来如此干货满满的工作坊,是不是特羡慕?这其实是三一基金会为E掘行动的项目提供全面有用的投后服务之一,想和E掘伙伴们一样享受同等待遇?那就不要犹豫啦~即刻起申请加入“E掘行动”吧!
关于“E掘行动”:
“E掘行动”是北京三一公益基金会的旗舰型资助计划,致力于发掘与资助创新、高效的公益项目,以此推动公益行业的科学高效发展。
E掘行动为优秀的公益项目提供不限领域、不限金额的资助。想更多了解E掘行动和申请获得E掘资助?后台回复“E掘”或直接点击“阅读原文”获取!我们的资助官员将365天全年无休,期待与您的项目相遇。
更多关于三一学者和E掘行动的经验干货分享
点击标题即可跳转
了解E掘行动详情与申请方法
▼▼▼